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2008 年 是 中 国 科学 技术 大 学 建 校 五 十 周年 . 为 了 反映 五 十 年 来 办 学 
理念 和 特色 , 集中 展示 学 校 教材 建设 的 成 果 , 学 校 决定 组 织 编写 出 版 代表 
学 校 教学 水 平 的 精品 教材 系列 . 在 各 方 的 共同 努力 下 , 共 组 织 选 题 281 种 ， 
经 过 多 轮 、 严 格 的 评审 , 最 后 确定 50 种 入 选 精品 教材 系列 . 

1958 年 学 校 成 立 之 时 , 教员 大 部 分 都 来 自 中 国 科 学 院 的 各 个 研究 所 . 
作为 各 个 研究 所 的 科研 人 员 , 他 们 到 学 校 后 保持 了 教学 的 同时 又 作 研 究 的 
传统 . 同时 , 根据 “全 院 办 校 , 所 系 结合 ”的 原则 , 科学 院 各 个 研究 所 在 科研 
第 一 线 工作 的 杰出 科学 家 也 参与 学 校 的 教学 , 为 本 科 生 授课 , 将 最 新 的 科 
研 成 果 融 入 到 教学 中 . 五 十 年 来 , 外 界 环境 和 内 在 条 件 都 发 生 了 很 大 变化 ， 
但 学 校 以 教学 为 主 、 教 学 与 科研 相 结合 的 方针 没有 变 . 正 因为 坚持 了 科学 
与 技术 相 结合 、 理 论 与 实践 相 结合 、 教 学 与 科研 相 结 合 的 方针 , 并 形成 了 
优良 的 传统 , 才 培 养 出 了 一 批 又 一 批 高 质量 的 人 才 . 

学 校 非 常 重视 基础 课 教 学 和 专业 基础 课 教 学 的 传统 , 也 是 她 特别 成 功 
的 原因 之 一 . 当今 社会 , 科技 发 展 突飞猛进 、 科 技 成 果 日 新 月 异 , 没有 扎实 
的 基础 知识 , 很 难 在 科学 技术 研究 中 作出 重大 贡献 . 建 校 之 初 , 华罗庚 、 有 吴 
有 训 、 严 济 慈 等 老 一 辜 科 学 家 、 教 育 家 就 身体 力行 , 亲自 为 本 科 生 讲授 基 
础 课 . 他 们 以 渊博 的 学 识 、 精 湛 的 讲课 艺术 、 高 尚 的 师 德 , 带 出 一 批 又 一 批 
杰出 的 年 轻 教员 , 培养 了 一 届 又 一 届 优 秀 学 生 . 这 次 入 选 校庆 精品 教材 的 
绝 大 部 分 是 本 科 生 基础 课 或 专业 基础 课 的 教材 , 其 作者 大 多 直接 或 间接 受 
到 过 这 些 老 一 辈 科 学 家 、 教 育 家 的 教诲 和 影响 , 因此 在 教材 中 也 贯穿 着 这 
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些 先辈 的 教育 教学 理念 与 科学 探索 精神 . 

改革 开放 之 初 ,学校 最 先 选 派 青 年 骨干 教师 赴 西 方 国家 交流 、 学 习 , 他 
们 在 带 回 先进 科学 技术 的 同时 , 也 把 西方 先进 的 教育 理念 、 教 学 方法 、 孝 
学 内 容 等 带 回 到 中 国 科学 技术 大 学 , 并 以 极 大 的 热情 进行 教学 实践 ,“ 科 
学 与 技术 相 结 合 、 理论 与 实践 相 结合 、 教 学 与 科研 相 结 合 ”的 方针 得 到 进 
一 步 深化 , 取得 了 非常 好 的 效果 , 培养 的 学 生得 到 全 社会 的 认可 . 这 些 教学 
改革 影响 深远 , 直到 今天 仍然 受到 学 生 的 欢迎 , 并 辐射 到 其 他 高 校 . 在 入 
选 的 精品 教材 中 , 这 种 理念 与 尝试 也 都 有 充分 的 体现 . 

中 国 科 学 技术 大 学 自 建 校 以 来 就 形成 的 又 一 传统 是 根据 学 生 的 特点 ， 
用 创新 的 精神 编写 教材 . 五 十 年 来 , 进入 我 校 学 习 的 都 是 基础 扎实 、 学 业 
优秀 、 求 知 欲 强 、 勇 于 探索 和 谊 求 的 学 生 , 针对 他 们 的 具体 情况 编写 教材 ， 
才能 更 加 有 利于 培养 他 们 的 创新 精神 . 教师 们 坚持 教学 与 科研 的 结合 , 根 
据 自 己 的 科研 体会 , 借鉴 目前 国外 相关 专业 有 关 课程 的 经 验 , 注意 理论 与 
实际 应 用 的 结合 , 基础 知识 与 最 新 发 展 的 结合 , 课堂 教学 与 课外 实践 的 结 
合 , 精心 组 织 材 料 、 认 真 编写 教材 , 使 学 生 在 掌握 扎实 的 理论 基础 的 同时 ， 
了 解 最 新 的 研究 方法 , 掌握 实际 应 用 的 技术 . 

这 次 入 选 的 50 种 精品 教材 , 既是 教学 一 线 教师 长 期 教学 积累 的 成 果 ， 
也 是 学 校 五 十 年 教学 传统 的 体现 , 反映 了 中 国 科 学 技术 大 学 的 教学 理念 、 
教学 特色 和 教学 改革 成 果 . 该 系列 精品 教材 的 出 版 , 既是 向 学 校 五 十 周年 
校庆 的 献礼 , 也 是 对 那些 在 学 校 发 展 历史 中 留 下 宝贵 财富 的 老 一 代 科 学 
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《概率 论 教程 》 第 1 版 出 版 至 今 已 有 十 年 了 ， 作 为 中 国 科学 技术 大 学 “概率 
论 基 础 ”课程 的 教科 书 自 出 版 以 来 经 历 了 学 生 和 读者 的 评价 过 程 . 总 的 说 来 ,大 
家 认为 本 书 还 是 有 特色 的 ,但 是 其 中 也 存在 不 少 错 误 ， 学 生 和 读者 当面 或 来 信 给 
我 们 提出 了 许多 宝贵 的 意见 . 这 次 再 版 我 们 接受 了 广大 读者 的 有 益 批评 意见 , 对 第 
1 版 的 内 容 和 习题 作 了 必要 的 修正 、 删 减 和 增补 . 特别 是 胡 太 忠 教授 多 年 来 从 事 本 
课程 的 教学 ， 给 本 书 提 出 了 大 量 中 肯 和 宝贵 的 意见 .《 概 率 论 教程 》 是 研究 生 “ 概 
率 论 基础 ”课程 的 一 本 教科 书 . 随 着 概率 统计 知识 在 我 国 的 普及 , 越 来 越 多 的 学 生 
把 “概率 论 基 础 ”作为 应 该 掌握 的 基础 知识 之 一 ， 所 以 金融 工程 和 其 他 非 概率 论 
与 数理 统计 专业 的 学 生 也 纷纷 选修 了 这 门 课程 ， 这 无 形 中 也 给 我 们 增加 了 不 少 压 
力 , 因为 教科 书 中 任何 地 方 的 错误 都 将 给 学 生 造 成 误导 . 由 于 水 平 有 限 , 错误 还 是 
难免 存在 的 , 敬 请 广大 读者 给 予 指正 . 

借 本 书 再 版 之 际 , 我们 再 次 感谢 已 故 的 陈 希 搬 院士 . 本 书 是 在 他 的 鼓励 下 完 
成 的 , 对 第 1 版 的 前 言 他 倾注 了 大 量 的 心血 , 在 我 们 草稿 的 基础 上 又 作 了 大 量 的 
修改 . 另外 ,本 书 编者 之 一 胡 太 忠 的 写作 得 到 国家 科技 部 973 项 目 子 课题 “动态 风 
险 度量 与 控制 ”( 编 号 : 2007CB814901) 的 资助 , 特此 感谢 . 





编著 者 


2007 年 12 月 于 合肥 
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本 书 是 在 中 国 科学 技术 大 学 概率 统计 教研 室 诸 同事 多 年 给 研究 生 教学 的 基础 
上 编写 的 . 以 往 诸 同事 从 讲授 这 门 课程 中 感受 到 应 加 强 以 测度 论 为 基础 的 概率 论 
以 及 极限 理论 方面 的 基础 知识 , 以 后 的 实践 证 明了 这 一 意见 是 正确 的 . 因此 在 我 校 
概率 统计 专业 , 概率 论 课程 分 为 概率 论 基础 和 极限 理论 两 部 分 , 不 论 是 主 修 概 率 论 
方向 还 是 主 修 数 理 统计 方向 的 学 生 , 都 必须 学 习 这 两 门 . 

本 书 是 概率 论 的 基础 部 分 . 前 三 章 以 适合 于 概率 论 需 要 的 形式 讲述 了 测度 论 
的 知识 ， 有限 与 无 限 , 可 数 与 不 可 数 , 其 间 的 关系 在 数学 思想 上 有 重要 意义 . 第 1 
章 集合 族 的 构造 问题 便 是 从 这 一 思路 来 介绍 集合 代数 和 集合 o 代数 的 .概率 论 
及 测度 论 难 点 之 一 就 是 人 们 如 何 来 认识 无 限 , 如 何 来 处 理 无 限 . 函数 形式 (集合 形 
式 ) 单调 类 定理 生动 地 体现 了 人 们 如 何 从 有 限 到 无 限 的 认识 过 程 . 同时 该 思想 也 
贯穿 于 全 书 . 只 要 理解 了 这 一 思路 , 概率 论 的 学 习 就 有 了 正确 的 指引 .第 2 章 介 绍 
了 随机 变量 积分 、Lebesgue 分 解 和 Radon-Nikodym 定理 , 并 由 此 得 到 了 分 布 函数 
的 Lebesgue 分 解 . 本 章 还 论述 了 一 个 重要 事实 , 即 随机 变量 Y 关于 由 随机 变量 
六 生成 的 o 代数 可 测 , 则 了 必 是 XX 的 Borel 可 测 函 数 . 本 章 最 后 介绍 了 本 质 上 、 
下 确 界 , Ly 收敛 定理 和 一 些 常用 的 概率 不 等 式 . 第 3 章 论 述 了 乘积 空间 , 其 中 包 
含 了 测度 论 的 基础 性 定理 , 即 Fubini 定理 以 及 乘积 概率 存在 性 定理 . 在 这 个 基础 
上 , 从 第 4 章 开 始 转向 概率 论 各 方面 的 内 容 . 关于 概率 论 基 本 特征 的 问题 , 我 们 同 
意 Loeve M 的 观点 , 即 测度 论 是 研究 定义 在 一 个 可 测 空 间 而 取 值 于 另 一 个 可 测 空 
间 的 可 测 函 数 族 , 而 概率 论 的 重点 在 于 研究 函数 族 在 这 种 变换 下 的 不 变量 , 即 其 联 
合 分布 . 因此 可 以 说 , 概率 论 的 对 象 就 是 对 分 布 的 研究 . 第 4 章 主要 介绍 条 件 期 望 
和 条 件 分 布 . 由 此 导出 测度 论 的 另 一 个 基础 性 定理 , 即 Kolmogorov 相 容 性 定理 . 由 
于 条 件 期 望 的 一 般 定义 高 度 抽象 , 对 它 的 理解 和 运用 有 一 定 的 难度 . 本 书 在 所 给 定 
的 o 代数 是 由 随机 变量 (向 量 ) 生成 的 情况 下 , 介绍 了 如 何 来 求 条 件 期 望 , 以 及 条 
件 独 立 性 的 概念 及 其 判别 准则 . 这 一 讲述 方式 更 接近 于 条 件 概 率 的 直观 概念 . 本 章 
最 后 介绍 了 执 列 和 停 时 , 这 是 进一步 学 习 随机 过 程 和 极限 理论 的 基本 工具 . 为 了 不 
与 极限 理论 课程 发 生 过 多 的 重 肝 , 在 这 里 仅 介 绍 一 些 基本 概念 和 基本 的 不 等 式 , 并 
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力图 使 读者 对 鞭 差 与 零 均 值 独立 随机 变量 和 不 相关 随机 变量 之 间 的 区 别 , 获得 一 
种 直观 的 理解 . 为 加 深 对 蒜 差 和 停 时 等 概念 的 重要 意义 的 理解 , 我 们 在 第 6 章 的 证 
明 中 将 多 次 使 用 这 些 工具 , 以 显示 其 威力 . 第 5 章 着 重 讨论 随机 变量 分 布 函数 和 特 
征 函 数 的 相互 关系 . 特征 函数 是 研究 经 典 极限 理论 和 现代 随机 过 程 (如 半 蒜 ) 的 基 
本 工具 , 故此 处 较 仔 细 地 介绍 了 特征 函数 的 性 质 及 其 判别 方法 . 第 6 章 的 内 容 是 大 
数 定律 和 中 心 极限 定理 . 我 们 努力 使 所 用 的 方法 适合 于 处 理 较 此 处 所 论 更 为 一 般 
的 情况 , 以 便 为 进一步 学 习 这 个 重要 论题 而 打下 基础 , 同时 在 这 里 也 介绍 了 用 经 典 
Lebesgue-Stieltjes 变换 和 最 近 发 展 起 来 的 Stein-Chen 方法 来 处 理 正 态 逼 近 的 速度 
问题 . 本 章 最 后 介绍 了 独立 同 分 布 情 况 下 的 重 对 数 律 . 

本 课程 的 后 续 课 程 是 极限 理论 . 在 那里 , 第 6 章 的 内 容 可 以 用 更 一 般 的 形式 给 
出 . 但 为 了 在 学 习 上 获得 由 浅 入 深 的 效果 , 并 便于 那些 只 对 极限 理论 的 基本 内 容 感 
兴趣 的 读者 , 我 们 在 题材 的 选择 上 采取 了 这 种 既 不 过 于 专门 化 , 但 又 比 一 般 初等 教 
科 书 较 进一步 的 做 法 . 希望 这 种 方式 能 对 读者 有 所 神 益 . 

阅读 本 书 所 需要 的 预备 知识 是 初等 概率 论 和 一 定 的 实 变 函 数论 知识 . 为 了 便 
于 进一步 掌握 所 学 内 容 , 每 章 后 面 有 一 定数 量 的 习题 . 在 这 些 习题 中 , 有 些 是 对 本 
章 内 容 的 加 深 , 有 些 则 是 正文 内 容 的 扩充 . 独立 完成 相当 一 部 分 习题 , 对 切实 掌握 
本 课程 的 内 容 有 着 重要 的 意义 . 
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太 忠 副教授 、 刘 东海 、 谭 智 平和 魏 国 省 等 仔细 审阅 了 本 稿 , 胡 海 燕 小 姐 打出 了 书稿 ， 
在 此 表示 深切 的 谢意 . 虽然 作者 和 教研 室 同仁 讲授 概率 论 基础 的 课程 有 了 十 余年 
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概率 论 的 基本 概念 源 于 测度 论 . 但 和 其 他 数学 分 支 一 样 , 概率 论 也 有 它 自己 的 
一 套 术 语 和 工具 . 在 这 一 章 里 , 我 们 将 引入 一 些 概 率 论 中 的 术语 和 一 些 基 本 概念 . 
这 儿 我 们 假定 读者 已 经 具备 了 测度 论 和 实 变 函 数 的 基本 知识 , 并 对 概率 论 有 了 初 
步 的 了 解 . 众所周知 , 事件 、 试验 和 概率 是 概率 论 中 最 基本 的 概念 . 公理 化 地 看 , 事 
件 是 一 些 能 够 用 逻辑 运算 “ 非 >“ 和 ”及 “或 ”组 合 起 来 的 数学 化 了 的 实体 , 而 概 
率 则 是 在 事件 类 上 的 一 种 赋值 . 我 们 这 儿 所 说 的 试验 是 指 一 次 随机 试验 的 一 个 结 
果 . 考虑 到 我 们 所 研究 的 事件 和 试验 的 自然 条 件 , 每 次 试验 的 结果 是 确定 的 , 即 我 
们 所 考虑 的 事件 不 是 实现 就 是 尚未 实现 , 这 使 我 们 引入 试验 空间 8 的 概念 . 它 由 
所 考虑 的 全 部 可 能 的 试验 结果 组 成 , 并 可 在 每 个 事件 和 实现 该 事件 的 所 有 试验 点 
集 所 组 成 的 子 集 之 间 建 立 一 一 对 应 关系 . 于 是 概率 就 可 以 看 作 一 个 集合 函数 , 它 类 
似 于 定义 在 欧 氏 空间 某 一 个 子 集 上 的 体积 , 这 就 是 测度 论 的 观点 . 

关于 概率 , 我 们 首先 在 集合 代数 上 定义 , 然后 开拓 到 o 代数 上 , 由 此 提出 概率 
空间 的 概念 . 这 样 的 处 理 有 如 下 两 个 优点 : 其 一 是 阐述 了 测度 论 中 十 分 重要 的 延 
拓 定 理 ; 其 二 是 在 构造 欧 氏 空间 或 乘积 空间 上 的 概率 时 , 可 以 很 自然 地 先 在 集合 代 
数 或 集合 半 代 数 上 定义 , 然后 延 拓 . 这 在 应 用 中 是 比较 容易 做 到 的 . 
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1.1 事件 与 概率 


1.1.1 事件 和 事件 的 运算 


人 类 在 对 自然 界 的 认识 过 程 中 最 基本 的 概念 是 事件 . 下 面 我 们 只 从 它们 是 否 
发 生 这 一 角度 来 考察 事件 , 而 不 涉及 事件 本 身 的 具体 内 容 . 习惯 上 常用 4, B,C 等 
英文 大 写字 母 来 表示 事件 , 而 不 可 能 事件 和 必然 事件 分 别 用 0 和 中 来 表示 . 以 4 
表示 4 不 发 生 这 一 事件 ; 以 4UB 表示 两 个 事件 4 和 B 中 至 少 发 生 一 个 的 事件 ; 
以 4m 表示 事件 A 和 B 同时 发 生 的 事件 . 运算 “U” 和 “n>” 分 别称 为 事件 的 并 
和 交 . 为 方便 起 见 , 事件 ANnB 也 可 记 为 A4B. 上 述 并 、 交 运算 可 以 推广 到 非 空 事 
件 族 上 去 . 对 每 个 有 限 或 无 限 的 非 空 事件 族 {4;,i e 中}, 我 们 以 


表示 {hi,ie 1} 中 至 少 有 一 个 发 生 的 事件 ; 以 
人 生生 避 4 

表示 {4;,ie 1T} 中 每 一 个 都 发 生 的 事件 . 为 了 今后 运算 的 方便 , 当 指 标 集 了 为 空 集 
时 , 我 们 约定 

U4=0 和 4=2. 

iET i€T 
事件 的 并 和 交 运 算 满 足 如 下 的 交换 律 、 分 配 律 和 结合 律 : 

AUB=BUA, ANMNB= BNA; 
(AUB)NC=(ANC)U(BNMO), (ANB)UC= (AUC)IN(BUO); 
(AUB)UC= AU(BUO), (ANB)NC= AN(BNO). 

此 外 , 事件 的 余 运算 具有 如 下 的 De Morgan 法 则 : 


(V4) -ns (na) -Us (4°)° =A. 


2E 了 i€ET i€lI ieET 
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上 述 的 性 质 用 事件 发 生 和 不 发 生 的 概念 可 以 很 容易 验证 . 

下 面 几 个 概念 也 是 经 常用 到 的 . 

不 相 容 使 4B = 0$ 的 两 个 事件 4 和 B 称 为 不 相 容 或 不 相交 的 , 此 时 4UB 
可 以 改写 为 4+ B. 若 {hi,i EE 了} 为 一 族 两 两 不 相交 的 有 限 或 可 列 非 空 事件 族 , 则 
U hi 也 可 以 改 记 为 > 4i. 本 书 中 记号 沁 4; 蕴涵 事件 族 {hi,i e 1} 是 两 两 不 相 
赛 的 YE 了 iET 

事件 差 事件 4 发 生 而 B 不 发 生 称 为 事件 A 和 B 的 差 , 记 为 4 一 BB 或 A\B. 
由 定义 , A 一 B= 4B*. 

对 称 差 事件 4 与 B 的 对 称 着 是 指 事件 4 与 B 中 有 且 仅 有 一 个 发 生 , 记 为 
AAB. 由 定义 , AAB= (4-B)+(B- A). 

包含 若 事件 4 的 发 生 蕴涵 事件 B 的 发 生 , 则 称 4 包含 于 B, 我 们 用 ACB 
或 也 2 4. 这 时 称 事件 4 是 事件 B 的 子 事件 . 若 A1 2 A2 2 .…, 则 我 们 称 事件 族 
{4 >1}) 是 单调 下 降 的 , 记 为 4 4. 车 4 C hz C .…, 则 称 事件 族 {A,,n > 1} 
是 单调 上 升 的 , 记 为 4， 17. 

相等 ”事件 4 与 B 称 为 相等 ,车 ACB 且 B CA. 今后 对 相等 的 事件 不 加 
区 别 . 

包含 关系 是 事件 集合 上 的 一 种 偏 序 关系 , 即 

4CG 4i; 
ACB, PC4 一 4= 也 ; 
ACB, BCC—ACC. 


显然 , 在 包含 关系 下 , 我 们 有 
ACOCBCC—> AUBCCO.; 
ADC,BIC— ANB2CO.; 
ACB—>ADB:. 
用 归纳 法 可 以 证 明 如 下 引 理 , 该 引 理 在 后 面 的 章节 中 会 用 到 . 
引 理 1.1.1 设 {hi,1 < i< nj} 为 一 有 限 事 件 族 , 则 


n n i—1 
Ai=》, (- Us >» 
二 1 z=1 7=1 


© 
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1.1.2 试验 


本 书 我 们 把 一 次 试验 理解 为 一 次 有 偶然 性 介入 的 试验 . 更 确切 地 说 ,看 成 是 这 
种 随机 试验 的 一 个 结果 . 因此 , 在 所 考虑 的 模型 中 每 个 试验 必然 意味 着 事先 给 定 的 
每 个 事件 是 否 实现 . 下 面 我 们 将 建立 试验 和 事件 的 对 应 关系 . 

首先 考虑 给 定 模型 下 的 试验 结果 . 试验 结果 的 全 体 称 为 试验 空间 一般 地 , 试 
验 空间 是 一 个 任意 的 非 空 集合 , 通常 把 它 作 为 进一步 讨论 和 研究 的 出 发 点 . 它 
的 元 素 ( 即 试验 结果 ) 看 做 是 该 空间 中 的 一 个 点 , 今后 用 8 来 表示 . 故 


二 {w:w 为 试验 结果 }. 


例 1.1.1 从 n 件 产品 中 随机 抽取 rm 件 进行 检验 . 由 排列 组 合 知识 得 不 同 的 
抽取 方法 有 (2) 种 , 这 (*) 个 试验 结果 的 全 体 就 是 我 们 的 试验 空间 0. 给 定 的 模 
型 即 为 “从 n 件 产品 中 随机 抽取 m 件 ”， 著 以 82 表示 一 个 具体 的 抽取 结果 , 则 
0 = {w:o 为 任 一 抽取 结果 } 4 


例 1.1.2 若 例 1.1.1 中 的 抽取 要 考虑 到 先后 次 序 , 则 有 
已 ”一 了 (一 1 一 人 十 1) 


种 不 同 的 抽取 方法 . 这 Pm 个 试验 结果 的 全 体 即 为 试验 空间 , 这 时 给 定 的 模型 与 例 


1.1.1 有 区 别 . < 
例 1.1.3 观察 日 光 灯 管 的 寿命 , 这 时 每 一 时 刻 都 是 试验 的 一 个 可 能 结果 . 芳 以 
w 表示 每 一 具体 试验 的 寿命 , 则 试验 空间 2 = {w:w > 0}. 4 


下 面 我 们 进一步 讨论 试验 与 事件 之 间 的 关系 . 我 们 可 以 把 每 个 事件 4 与 试验 
空间 02' 中 实现 事件 4 的 试验 所 组 成 的 试验 空间 的 那个 子 集 4' 联系 起 来 , 而 且 很 
自然 地 试图 把 4 与 4' 等 同 起 来 . 例如 , 在 例 1.1.1 的 从 n 件 产 品 中 随机 抽取 mm 件 
这 一 试验 中 , 设 事件 4 是 被 抽 到 的 m 件 产品 中 恰 有 天 件 次 品 这 一 事件 , 而 4 表示 
在 试验 空间 2' ( 它 由 (”) 个 试验 结果 组 成 ) 中 这 样 的 一 个 子 集 : 


4 ={a: 取出 的 mm 件 产 草 中 有 大 件 次 品 , 其 余 mm 一 大 件 是 正品 }， 


则 自然 把 4 和 &' 等 同 起 来 . 先 假定 对 应 4 一 4' 是 一 一 的 , 即 试验 空间 8' 足够 
大 , 使 对 给 定 的 两 个 不 同事 件 , 至 少 存在 一 个 试验 , 它 实现 其 中 之 一 而 排除 男 一 个 ， 
但 如 果 试 验 空间 不 够 大 , 则 4 与 4 不 一 定 能 一 一 对 应 . 


4 
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例 1.1.4 某 工厂 的 产品 分 为 一 等 品 、 二 等 品 、 三 等 品 及 次 品 , 前 三 个 等 级 为 
合格 品 . 以 A; (i = 1,2,3) 分 别 记 产 品 为 i 等 品 这 个 事件 . 如 果 试 验 仅仅 检验 其 是 
否 为 合格 品 , 则 在 此 试验 空间 (由 合格 品 和 次 品 组 成 ) 中 , A1, 42 和 As 是 不 可 区 
别 的 . 4 


在 试验 空间 足够 大 的 假定 下 , 事件 4 和 实现 4 的 全 部 试验 结果 4' 可 以 一 
一 对 应 . 车 把 由 所 有 试验 结果 组 成 的 集合 2' 和 必然 事件 8 对应, 不 含 试验 结果 的 
集合 W 和 不 可 能 事件 1 对 应 (注意 这 里 82' 是 试验 空间 , 而 V 是 8' 中 的 空 集 ). 显 
然 , 车 4 对 应 于 4, B' 对 应 于 B, 则 (4)° 对 应 于 4c; 4'UB' 对 应 于 AUB; 水 mm 
对 应 于 ANB. 简 言 之 , 车 用 “<”、“U” 和 “mm” 分 别 表示 在 2’ 上 按照 集合 论 意义 下 
所 定义 的 余 、 并 和 交 运 算 , 则 上 述 结 果 可 以 记 为 


(A°) = (40)9， (AUB)= A'UB', (ANB)=ANB.. 


于 是 , 在 对 应 4 4' 下 , 1.1 节 中 的 事件 运算 转化 成 了 集合 论 中 集合 的 运算 , 因此 ， 
我 们 可 以 把 事件 4 和 实现 它 的 所 有 试验 结果 的 集合 4' 等 同 起 来 . 以 后 我 们 将 去 
掉 记号 “”. 这 样 对 1.1 节 中 关于 事件 的 各 种 概念 都 可 有 集合 论 中 的 经 典 概念 与 之 


1.2 集合 代数 


由 事件 4 和 试验 空间 中 子 集 4' 的 一 一 对 应 , 我 们 理应 进一步 讨论 如 何 给 定 试 
验 空间 2 以 及 如 何 给 定 8 中 事件 类 的 结构 . 关于 试验 空间 2, 由 定义 它 应 该 充分 
大 , 使 得 能 够 找到 一 个 试验 把 两 个 不 同 的 事件 区 分 开 来 . 至 于 究竟 多 大 合适 , 要 根 
据 实际 情况 或 理论 上 的 需要 而 定 , 这 儿 不 准备 进一步 深入 讨论 . 下 面 我 们 讨论 如 何 
给 定 2 中 事件 类 的 结构 . 我 们 知道 , 2 的 任 一 子 集 类 都 是 8 中 所 有 子 集 所 构成 的 
集合 多 (0) 的 一 个 子 集 . 其 中 一 个 重要 的 子 集 类 是 在 一 种 或 几 种 集合 运算 下 封闭 
的 类 . 所 谓 类 多 在 一 种 指定 运算 下 封闭 , 是 指 对 多 中 元 素 经 过 这 种 指定 运算 后 所 
得 到 的 元 素 仍 在 多 中 . 集合 代数 (又 称 布尔 代数 ) 是 在 余 、 有 限 并 及 有 限 交 下 封闭 
的 子 集 类 . 确切 地 , 我 们 有 如 下 的 定义 . 


定义 1.2.1 8 的 子 集 类 多 称 为 中 的 集合 代数 或 集合 域 , 若 它 满足 : 


概率 论 教 程 QOOOOOOOOOOOOOOO0O0O0O00O00G00. 


(1) 2 €,; 
(2) 关 4,Be%, 则 AUBEe%; 
(3) 车 Ae%, 则 A° € 尖 . 
以 下 为 简明 起 见 , 我 们 简称 集合 代数 为 代数 (或 域 ). 
很 容易 证 明 上 述 定义 中 (1),(2),(3) 三 条 与 下 列 的 (i), (六 ), (ii) 三 条 是 等 价 的 : 
(i) Ve®”, 
(站 若 4,Be%, 则 ANBEe%; 
(二) 若 4E 多 , 则 4e € 多 . 
其 实 , 在 定义 中 条 件 (1) 和 (i) 都 可 以 去 掉 , 这 是 因为 条 件 (2) 和 (3) 或 条 件 i) 和 
(ii) 分 别 蕴 涵 了 条 件 (1) 和 (i). 
由 归纳 法 不 难 推 知 , 代数 对 有 限 交 和 有 限 并 运算 封闭 . 


给 定 8 的 一 个 子 集 类 多 , 必然 存在 包含 多 县 由 8 的 子 集 构成 的 最 小 代数 x. 
为 证 明 这 一 点 , 只 要 把 ox 定义 为 属于 所 有 包含 多 的 代数 的 集合 所 组 成 的 类 . 容易 
验证 , 若 sx,i E 7, 为 包含 多 的 代数 , 则 0 也 是 包含 多 的 代数 , 而 包含 多 的 代 


数 总 是 存在 的 , 例如 罗 (92) 就 是 . 这 样 规定 的 代数 sg 称 为 是 由 多 生成 的 . 需要 这 
种 代数 的 理由 是 , 在 我 们 考虑 到 集合 类 多 的 有 限 交 、 有 限 并 和 余 的 运算 中 , 需要 一 
个 包含 且 在 所 考虑 的 运算 下 封闭 的 最 小 子 集 类 . 


例 1.2.1 设 2 =[0,1), 令 
- {Ue Oga<bh<l,1g<ign, nen 
i=l1 
其 中 N 是 自然 数 集合 , 则 oz 是 [0,1) 上 的 一 个 代数 . 4 
例 1.2.2 设 28=[0,1], 令 


2 = {0, 1, {x1,. , Tn}, {Z1 ,Zn Og <1, l<i<n, ne€ N}, 
则 gz 是 [0,1] 上 的 一 个 代数 . < 


接 下 来 的 问题 是 , 如 何 给 出 8 中 事件 类 多 所 生成 的 代数 . 我 们 通过 下 述 的 构 
造 法 一 步 步 得 出 . 先 研究 有 限 代 数 , 即 在 子 集 族 中 集合 个 数 有 限 的 代数 . 

定义 1.2.2 设 {4iie 刀 是 2 中 的 子 集 , 其 中 了 工 有 限 . 若 {4;,i€ 了 两 两 不 
相交 , 且 和 为 0, 则 称 多 = {hi,i eT} 是 8 的 一 个 有 限 分 割 . 
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设 多 和 多 ' 是 9 中 的 两 个 有 限 分 割 , 若 多 中 每 个 集合 都 是 匈 ' 中 某 些 集合 
之 并 , 则 称 多 ' 比 多 更 精细 , 记 作 多 < 多 /. 


类 似 地 可 以 定义 8 的 一 个 可 列 分 割 . 由 定义 易 证 , 车 2 和 2 是 8 的 两 个 
有 限 分 割 , 则 必 存 在 8 的 一 个 有 限 分 割 多 , 使 得 2 < 多 , < 2. 事实 上 , 设 
={4iie7T), = {Bj,j EJ), 其 中 TT 和 J 都 是 有 限 集合 . 令 


B= {AiNB;,: ET, jE€J}, 
则 多 满足 上 述 要 求 . 
为 给 出 以 下 定理 , 我 们 先 介 绍 “ 原 子 ” 这 一 概念 . 子 集 族 oz 中 的 元 素 4 称 为 
1 中 zzY 的 原子 , 若 和 BCA 以 及 Bewy, 则 B= A. 


命题 1.2.1 0 的 有 限 分 割 多 所 生成 的 代数 oz 由 多 的 所 有 子 集 之 并 所 成 的 
集合 构成 ( 若 有 有 nn 个 集合 , 则 zy 中 有 2" 个 集合 ). 反之 , 若 xf 是 8 的 一 个 有 限 
子 集 代数 , 则 它 的 原子 全 体 多 构成 生成 x 的 2 的 一 个 有 限 分 割 . 


证 设 多 = {hi,1 < ign), 


了 
-a Oki<k2 < <k; nn, os 中 


其 中 4o = 由 定义 容易 验证 x 是 包含 多 的 一 个 代数 . 设 4 是 任 一 包含 多 
的 代数 . 对 .x 的 任 一 元 素 4, 设 4 = 2 A, Og ki < k2 < < hn, 于 


多 CA, 区 Ak, € 44,i= 1 又 因 oh 是 代数 ， 故 Ae 4, 从 而 5 od, 即 
好 是 由 多 生成 的 代数 . 


反之 , 设 wv = {hi,i & 1 了} 是 8 的 一 个 有 限 子 集 代 数 , 令 C; 等 于 4; 或 49， 
则 B= QC 或 是 空 集 或 是 x 的 原子 . 由 于 xf 有 限 , 故 形 如 B 的 集合 个 数 有 


限 . 记 非 守 的 B 集合 为 Bj;,j & J 令 儿 = 二 {Bj,j & J}. 由 集合 B 的 构造 法 知 : 若 

7 关上, 则 B;Bk = 0, 且 每 个 A4&€ oy 可 以 表 为 有 限 个 Bi 的 和 . 特别 取 4 = 2, 则 

2 = 出 Bj;. 因此 , 由 非 空 的 B 构成 的 集合 多 是 生成 sy 的 一 个 有 限 分 割 . 最 后 , 显 

然 有 当 4 e sf 为 原子 时 ， 一 定 存 在 B; < 多 使 得 4= Bi 
定理 1.2.1 设 儿 是 集合 8 的 任意 一 个 子 集 类 . 令 


= {0,0,4: 4 或 hr 属于 %} 
二 {B: B 为 鲁 中 元 素 的 有 限 交 }, 


概率 论 教程 OOOOOOOOOQOOOOOOOGCOOWU ti 


扩 二 {B: B 为 鲍 中 两 两 不 交 元 素 的 有 限 并 }， 
则 金 就 是 由 多 生 成 的 代数 . 

证 由 又 的 构造 法 ,我们 有 : 

(a GCG CE, HOeG,n ed; 

(b) 后 在 余 运算 下 封闭 ; 

(c) 久 在 有 限 交 运算 下 封闭 . 

为 证 明 多 是 多 的 生成 代数 , 我 们 仅 需 证 明 吻 是 包含 多 的 代数 , 这 是 因为 每 
个 包含 多 的 代数 一 定 包 含 镶 , 鲍 和 %% ( 即 多 的 最 小 性 ). 显然 , 8 < %, 2 € 多 
故 只 要 证 明 多 在 交 和 余 运 算 下 封闭 . 

先 证 铭 在 交 运 算 下 封闭 . 设 41 e 饭 , 42 e 饥 . 由 人 饥 的 构造 , 每 个 A; 可 表 为 


Ai= > Bi, Bi; € G, jE 六 i=1,2, 


jE 


其 中 角 标 集 几 , .及 是 有 限 的 . 又 因 名 在 交 运算 下 封闭 , 所 以 


AiNAs= >》 >》 Bi nN Bj, € %, 
J1EJ1 j2E 2 


即 多 在 交 运 算 下 封闭 . 
再 证 Gs 在 余 运算 下 封闭 . 设 任意 AEe 吹 ， 则 4 可 表 为 4 = > B;, 其 中 
i=1 
Bie 多 ,1<i<n. 于 是 4e = 作 Br. 车 能 证 明 
i=l1 
Be = BE bh, (1.2.1) 
则 利用 已 证 的 唤 对 交 运 算 的 封闭 性 , 得 4 € 斧 . 现 往 证 式 (1.2.1) 成 立 ， 设 
B= 门 Gie 多, 其 中 Ci EE 区 ,1<igm. 注意 到 
i 二 1 
n= 0 NO NNO,, 
其 中 C; 等 于 Gi; 或 Cr,1<igm, 且 是 对 所 有 可 能 组 合 求 和 ,于 是 
B= CONC NNO,, 
其 中 》 是 对 除 “C{ = 01,… ,C4 = Cm” 以 外 的 所 有 情形 求 和 ( 共 2™ -工种 ). 由 
于 Ge@G,1<igm,— 故 CiNON...NOCl Ee 多 ,从 而 Bee 色 . 有 
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1.3 概率 和 概率 空间 


20 世纪 30 年 代 所 建立 的 Kolmogorov 公理 化 体系 为 概率 论 竟 定 了 严密 的 数学 
理论 基础 , 使 得 概率 论 成 为 了 一 门 公认 的 数学 学 科 . 只 有 在 这 个 公理 体系 下 学 习 概 
率 论 , 才能 弄 清 楚 它 的 概念 和 理论 . Kolmogorov 公理 化 体系 是 建立 在 集合 论 和 测度 
论 的 基础 之 上 的 . 


从 事件 与 实现 这 一 事件 的 试验 所 构成 的 集合 一 一 对 应 出 发 , 我 们 可 以 定义 事 
件 的 概率 , 它 是 一 个 集 函 . 具体 地 , 我 们 有 


定义 1.3.1 集合 2 的 菜 个 子 集 代数 上 的 一 个 概率 P 是 oz 到 [0,1] 的 一 个 
映射 , 满足 如 下 的 三 条 公理 : 

(a) (规范 性 )P(O) = 1; 

(b) (有 限 加 性 ) 对 任意 两 两 不 交 的 有 限 子 集 族 {4i,1 < i < n}， 


P 3 4 = VPs): 
i=1 i=1 
(c) (在 0 处 的 连续 性 ) 设 4n& x, ne N, 满足 4A 40, 则 
lim P(A,) = 0. 


也 一 DO 


由 公理 (a) 和 (b)( 这 时 不 必要 求 公理 (c) 成 立 ), 可 得 如 下 的 概率 的 性 质 : 
(1) P(W) = 0. 

(2) (单调 性 ) 若 4i,4z € 2 且 hi 5 hz, 则 P(A41) < P(A42). 

(3) ( 强 可 加 性 ) 设 41, 42 < 以 , 则 


P(Ai1) 十 P(A») 一 P(Ai 站 42) 十 P(Ai U A2). 


(4) ( 半 可 加 性 ) 对 每 个 有 限 子 集 族 {hi,1 < i< nn), 有 


P (U 4 < S P(Ai). 


概率 论 教程 OOOOOOOOOOOOOOOOOOOQOOOOOOW: 
更 一 般 地 , 车 4;, Bi ce, Bi; C hi,1<ig<n, 则 


Pp (U | -P (U a) < 》 PC -PCB)), 


?一 1 


p (A 4 _P (A a)< 人 ) —P(B). 


i 二 1 i=1 


即 可 : n n 
U 4， U 5 C (ja — Bi;), 
i=l 1 一 1 i=1 
4- NB C Us B), 


| 
记 
© 
ll 
ea 
S 
有 
记 


其 中 Bi C Ai,1<ign. 
由 公理 (c) 可 以 推出 以 下 三 条 重要 性 质 : 
(5) (单调 序列 的 连续 性 ) 设 .x 是 2 的 一 个 子 集 代数 , 则 


An,AE YY, An 1A=> lim P(4n)=P(4)， [上 连续 性 ] 
An,AE YA, An1 A= lim P(An)=P(A). [下 连续 性 ] 


(6) (c 可 加 性 ) 设 w 是 8 的 一 个 子 集 代数 , 则 从 ox 到 [0,1] 的 映射 P 为 一 个 
概率 的 充分 必要 条 件 是 , PLD) = 1, 且 若 {A; e of,ie 1 为 两 两 不 相 容 的 可 数 子 集 
族 , 满足 > 4i 6E .2 则 

i€EI 


P (4 = 》P(4i) 


iEI iT 
(7) ( 半 c 可 加 性 ) 设 {4i,i € 了 } 和 {Bi,i € 1} 是 of 中 两 个 可 数 子 集 族 , 且 


BiChi,iel,l)Aew, UB E 好 , 则 
i€EI 


P LU 4 一 了 (U 5 < » [P(Ai) - P(Bi). (1.3.1) 
i€ET i€ET i€I 
该 结论 可 由 性 质 (4) 和 公理 (c) 推出 . 车 B; = 98,ieT, 则 式 (1.3.1) 简化 为 
P (U 4 < 》P(4i). (1.3.2) 
iET i€I 


10 


OODDOOOODOOOOODOOOOOOOGO 第 1 章 概率 空间 


为 了 把 在 8 的 子 集 代 数 wf 上 定义 的 每 个 概率 唯一 延 拓 到 更 广 的 集 类 上 去 , 我 
们 需要 进一步 研究 对 极限 运算 封闭 的 类 (代数 sy 仅 对 有 限 交 、 有 限 并 运算 封闭 ). 

定义 1.3.2 若 集 合 8 的 子 集 类 .x 包含 0 0 以 及 在 余 运 算 、 可 列 交 和 可 列 并 
运算 下 封闭 , 则 称 ox 是 8 的 一 个 子 集 o 代数 , 称 二 重 偶 (8, zy) 为 可 测 空 间 . 

根据 定义 , 为 验证 gx 是 一 个 子 集 o 代数 , 只 要 验证 ox 是 一 个 代数 以 及 在 可 列 
交 或 可 列 并 之 一 运算 下 封闭 即 可 . 

例 1.3.1 令 2 = (一 00,00) 会展 ， 


好 ={4: 4 为 有 限 个 两 两 不 交 形 如 (a, 9 或 (b, +eo) 的 集合 之 和 ， 
其 中 -0o0&oa&b<o0), 


则 sz 为 民 上 的 一 个 代数 , 但 不 是 o 代数 . 这 是 因为 4。 = (0,1 一 1/n] es 多 ,但 
U 4% = (0,1) 4 7. 如 果 定 义 
名 一 1 


01 二 {4: 4 为 可 数 个 两 两 不 变形 如 (a,0] 或 (+oo) 的 集合 之 和 ， 


其 中 -oo a&b<o00), 


则 hi 也 不 是 及 上 的 一 个 o 代数 , 这 是 因为 如 = 0 -le 好 ,但 站 如 = 
n=1 
{1} od, 即 oh 对 可 列 交 运算 不 封闭 
我 们 把 由 上 面 yf 或 oh 生成 的 o 代数 ( 见 定义 1.3.4) 称 为 直线 及 上 的 Borel 


域 , 记 为 多 (了 及) 史 ( 桶 ) 也 可 由 及 上 所 有 左 开 右 闭 区 间 族 生成 . 多 (了 有) 中 的 集合 称 为 
Borel 集 . 


有 时 我 们 还 要 处 理 扩 张 直 线 
取 一 及 U {~o00,+00} = [一 co, +o0] 


上 的 o 代数 . 由 所 有 形 如 (a,8] (oo0 < ab +00) 的 左 开 右 闭 区 间 族 所 生成 的 
o 代数 称 为 及 上 的 Borel 域 , 记 为 名 (RR). 4 
注 在 一 些 教科 书 和 文献 中 , 也 常常 把 我 们 这 儿 定 义 的 集合 代数 或 集合 c 代数 
称 为 集合 域 或 集合 o 域 , 简称 域 或 o 域 . 
例 1.3.2 设 2 为 任 一 集合 , 0 的 一 个 子 集 类 多 由 8 中 有 限 多 个 元 素 及 它们 
的 余 集 所 构成 . 如 果 2 中 元 素 只 有 有 限 多 个 , 则 多 包含 了 8 的 所 有 子 集 , 因此 多 
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是 2 上 的 一 个 o 代数 . 但 是 , 车 9 中 元 素 有 无 穷 多 个 , 上 述 子 集 类 多 仅仅 是 一 个 
代数 而 不 是 o 代数 (参见 例 1.2.2). 


由 于 2 中 有 无 穷 多 个 元 素 , 故 可 从 中 选取 子 集 4, 4 由 2 中 一 列 两 两 不 同 的 

元 素 组 成 ， 不 妨 设 A= {2w1, 2， 上. 令 B= {1w2, 4 由 多 的 定义 ， B 不 属于 

多， 如 果 多 是 o 代数 , 则 Bi = {tw2i} e 多 ,i 之 1, 从 而 B=》 Bie 多， 矛盾 . | 
i=1 


关于 o 代数 , 我 们 可 以 定义 如 下 运算 . 设 {46,i e 了 为 人 上 的 一 族 子 集 o 代 
数 . 令 


门 且 = {4: 4Ae wh, 对 一 切 ie 了 7)， 
i€ET 


(4 = {4: 4e oh, 对 某 个 ie 了. 
ZE 


可 以 证 明 门 4 是 一 个 o 代数 ,但 (J ox 不必 再 是 o 代数 ,即使 I 为 可 数 也 不 必 是 
i€ET i€EI 

ao 代数 (见习 题 ). 

一 般 地 , 由 定义 直接 验证 2 的 一 个 子 集 类 是 否 为 o 代数 是 一 件 很 不 容易 的 事 . 
下 面 介 绍 一 些 判 别 一 个 子 集 类 是 否 为 o 代数 的 方法 . 

车 4 则 令 im 了 hn = 耳 hw; 车 4 4 了) 则 令 lim4 hn = 六 4 

n=1 n= 二 1 

定义 1.3.3 设 多 为 1 的 一 个 子 集 类 , 如 果 它 在 lim f 和 lim | (序列 极限 ) 运 
算 下 封闭 , 则 称 多 是 2 的 一 个 单调 类 . 

定理 1.3.1 f 上 的 一 个 代数 gz 是 o 代数 的 充分 必要 条 件 是 yz 也 是 单调 类 . 


证 必要 性 是 显然 的 , 下 面 仅 证 明 充分 性 . 车 代数 sf 为 单调 类 , 设 4n < v， 
i=1 1=1 


()4,=(jB.ew, (hn= [| Cre wm, 
n=1 n=1 
故 sg 在 可 列 交 、 可 列 并 运算 下 封闭 , 其 他 条 件 已 由 cx 式 代数 而 满足 , 故 of 为 
代数 . 


定义 1.3.4 设 多 为 8 的 任 一 个 子 集 类 , 称 包 含 多 的 最 小 o 代数 为 由 多 生成 
的 og 代数 , 记 为 ol(); 类 似 地 , 包含 多 的 最 小 单调 类 称 为 由 多 生成 的 单调 类 , 记 
为 m(@). 


定理 1.3.2 若 oY 为 8 上 的 一 个 代数 , 则 cl(ez) = mm(2Z). 
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证 记 男 =cloz), .NM = m(4). 由 定理 1.3.1, 如 是 单调 类 , 故 . 矿 C 多 . 仍 由 
定理 1.3.1, 要 证 明 多 < .NM, 只 要 证 明 .N 是 代数 . 我 们 的 方法 是 先 构造 在 某 种 运 
算 下 封闭 的 .U 的 子 类 , 然后 证 明 该 子 类 就 是 .NH 本 身 , 从 而 证 明 HM 关于 某 种 运算 
封闭 . 证 明 分 为 两 步 : 


(1) .和 在 余 运 算 下 封闭 . 令 
AM'={B: BeN BeN). 
由 7 为 代数 知 CNMN' CAM. 设 Bn?B,BneM', 则 Be.N, 且 
B°= (im1B):=lim| BeeN. 
类 似 地 , 车 B, | B, Bn Ee .NM', 则 Be.NM, 且 
B°= (lim Bn) =lim? Be eH. 


因此 .NM' 是 单调 类 , 由 .H 的 最 小 性 得 .HM = .NM. 
(2) -HY 在 交 运 算 下 封闭 . 设 4e NM, 令 


Ma={B: Be.Wd, ABE .NM)}. 


设 {Bn,n 之 1} 为 Ha 中 的 单调 序列 , 由 于 lim 4B。 = ANnlim Bn, 故 .Ua 是 单调 
类 . 又 车 A € Y, 则 由 .NM 的 定义 得 tC .Na, 从 而 .Na 是 包含 oy 的 单调 类 , 由 
NM 的 最 小 性 得 .Wa = HM. 

最 后 , 对 一 切 4,B e .NM, A € MB 等 价 于 Be .Na, 故 当 Ae ,Be .NM 时， 
由 NMa = 二 .HM 得 Be.Na, 从 而 4 e .NB. 由 此 推出 oy C Ns, 但 .NB 为 单调 类 , 由 
HM 的 最 小 性 得 .Up = .NH. 

由 (1 和 (2) 知 多 C. 克 ,从 而 多 =. 帮 .定理 证 毕 . | 

定义 1.3.5 若 8 的 子 集 类 多 具有 如 下 性 质 : 

A,BEe®E —> ABEe®Y, 

则 称 多 为 7 系 . 若 多 满足 条 件 : 

(1) 2 € 和; 

(2) (对 真 差 运 算 封 闭 ) 设 4,Bew 且 ACB, 则 B-Ae%，; 

(3) (对 非 降 序列 并 封闭 ) 设 A,, eE ,n>z1, 且 A414, 则 Ae 光 . 
则 称 多 为 入 系 . 
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可 以 证 明 : 若 多 是 入 系 , 则 名 是 一 个 单调 类 ; 若 子 集 类 x 既是 x 系 又 是 入 
系 , 则 x 必 是 一 个 o 代数 . 

设 多 是 的 任 一 子 集 类 , 以 (BZ) 表示 由 多 生成 的 入 系 . 

例 1.3.3 设 0= 民 ,多 = {(--00,a], aeER}, 则 多 是 r 系 ,但 多 不 是 代数 , 也 
不 是 单调 类 . 4 

定理 1.3.3( 集 合 形式 的 单调 类 定理 ) 设 多 为 7 系 , 则 A(%) = o(%). 

证 明 方法 和 定理 1.3.2 的 证 法 相似 , 故 作为 练习 留 给 读者 (见习 题 2). 

定义 1.3.6 设 wt 是 8 上 的 一 个 og 代数 , 若 有 一 个 8 的 可 数 子 集 族 多 , 使 
2 二 ao( 儿 ), 则 称 sy 是 可 数 型 的 (或 称 为 可 分 型 的 ). 

例 1.3.4 设 8 =RR, oz = 多 (RR), 令 


二 {(a,b]: -00 <a&b<o0, 且 a,b 为 有 理 数 }， 


那么 久 是 及 上 的 一 个 可 数 子 集 族 . 显然 , 多 (RR) = ol 多), 故 盈 ( 了 及) 是 可 数 型 的 o 
代数 . 4 


应 用 中 所 考虑 的 绝 大 多 数 o 代数 是 可 数 型 的 , 特别 由 8 的 可 数 分 割 {4;,i € 了 7} 
所 生成 的 ac 代数 是 可 数 型 的 , 它 由 该 分 割 的 所 有 子 集 的 并 组 成 (从 而 势 为 o). 但 不 
是 每 个 可 数 型 的 o 代数 都 能 由 8 的 一 个 可 数 分 割 生成 . 例如 , 直线 上 的 Borel 域 . 
对 82 中 的 事件 族 {4n,n > 1}, 定义 
lim sup A,, = dim (sup A ) 一 a U Anm, 
n=1 m=n 


n—=00 7 之 也 


liminf A = lim 1 ( if 如】 = 局 全 Am. 
在 包含 关系 下 , 集合 lim sup 4; 为 集 族 {4%,n > 1} 的 最 小 上 界 , 又 称 为 其 上 极限 ， 
它 由 属于 无 穷 多 个 4 的 那些 试验 点 组 成 ; 集合 lim inf 4;, 为 集 族 {An,n > 1} 的 
最 大 下 界 , 又 称 为 其 下 极限 , 它 由 属于 几乎 所 有 的 4。( 即 除 掉 有 限 个 4,,, 属于 其 余 
的 4,,) 的 那些 试验 点 组 成 . 由 定义 知 


lim inf 4。cC lim sup A,. 
也 一 Co nn 
车 这 两 个 集合 相同 , 用 lim A 来 表示 这 个 公共 集合 . 特别 地 , 当 4 1 或 A | 时 , 有 
limsup An = lim A, = liminf A,. 
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再 由 定义 可 推 知 , 每 个 o 代数 在 运算 lim sup 和 liminf 下 封闭 . 为 直观 起 见 , 集合 
lim sup hn 常 写 成 {4io., 其 中 io. 是 infinite often 的 缩写 ， 意 为 无 穷 多 个 发 生 . 

定义 1.3.7 设 wz 是 0 的 一 个 o 代数 ,P 是 定义 在 st 上 的 概率 , 则 三 重 偶 
(1, 97,P) 称 为 一 个 概率 空间 . 


定理 1.3.4( 概 率 的 序列 连续 性 ) 设 {4An,n >1} 是 定义 在 (8, xY,P) 上 的 事件 
序列 , 则 


Pp (im inf An) < liminf P(An) < limsupP(An) <P (mm sup 4 . 
N00 n—00 na 00 


证 注意 到 fiminf de = ,lm_ 1 (inf, hm )， 故 利 用 概率 的 单调 连续 性 , 有 
p (hint 4 ) = mn,P (HE, 4m ) < J EP (hn) = Wei? (A). 
最 右边 的 不 等 式 可 以 类 似 地 证 明 , 而 中 间 的 不 等 式 是 显然 的 6 
下 面 的 结论 是 概率 论 中 经 常 引用 的 一 个 引 理 . 
引 理 1.3.1(Borel-Cantelli) 设 {A%,n > 1} 是 (8, 7,P) 中 的 事件 序列 , 且 
> P(A;,) < %, 


n=1 
则 
P (lim sup 4 ) = 0. 


用 一 Do 


证 由 概率 的 半 c 可 加 性 不 等 式 (1.3.2), 有 


在 上 式 中 令 n 一 oo 即 得 所 需 引 理 . 有 


下 面 我 们 引入 完备 概率 空间 的 概念 . 

定义 1.3.8 设 (1,.x,P) 是 一 个 概率 空间 , N C f2. 若 存 在 AeE oY, 使 NC 4 
P(4) = 0, 则 称 N 为 (2, oz,P) 上 的 P- 零 概 集 . 若 x 包含 了 1 的 每 个 P- 零 概 集 ， 
则 称 (2, x,P) 是 完备 的 . 
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由 定义 知 P- 零 概 集 的 子 集 还 是 P- 零 概 集 , 故 由 式 (1.3.2) 知 可 数 个 P- 零 概 集 
的 并 仍 是 P- 零 概 集 . 


定理 1.3.5 以 .Y 表示 (人, xy,P) 中 的 P- 零 概 集 全 体 , 令 
A={AUN: 4Ew Ne.N), 
则 7 = clwz,.f). 车 定义 
P(AUN)=P(A), vAEw, NEeEN 


(该 定义 是 不 含混 的 ), 则 在 史上 定义 了 概率 了 的 扩张 FE, 且 概 率 空间 (8,.z7,P) 是 
完备 的 . 空间 (1, .9,P) 称 为 (1, .9Y,P) 的 完备 化 . 

证 ”由 于 x 和 .NH 在 可 列 并 运算 下 封闭 , 故 zy 在 可 列 并 运算 下 封闭 设 
N Ee NH, Ae syY, 由 定义 知 存在 Be xy 使 得 NC B,P(B) = 0. 注意 到 

(AUN) = ANN°=AN(B:+BNN)=(AUB) +BN(AUN), 

其 中 BN(AUN)* CB, 故 BN(AUN): eMN. 又 (AUB): ey, 从 而 (AUN): e 好 
即 x 在 余 运算 下 封闭 . 由 此 知 好 是 c 代数 . 根据 x 的 定义 知 区 是 包含 gf 和 
人 的 最 小 go 代数 , 故 好 = of, -四 )， 

定理 中 P 的 定义 不 含混 是 指 , 若 .x9 中 元 素 有 两 种 不 同 表示 方 法 , 则 5 的 值 不 依 
赖 于 表示 的 方法 . 具体 地 说 ， 车 AiUN! = AoUN, < 25， 则 P(Ai UNi) 一 P(4>UNa2). 
事实 上 , 由 41U Ni = AsU Na 可 推出 


41A42 C NiU Na2， 


故 P(A1AA2) = 0, 从 而 P(A41) = P(42). 由 P 定义 即 有 PB 在 避 中 元 素 上 的 值 不 依 
赖 于 表示 的 方法 . 可 以 直接 验证 PP 是 gf 上 的 概率 , 且 (0,x7,P) 是 完备 的 . 


1.4 概率 的 扩张 


我 们 已 经 在 代数 gf 上 定义 了 概率 , 接 下 来 的 问题 很 自然 地 是 如 何 把 xf 上 的 
概率 唯一 扩张 到 c(ez) 上 去 . 思路 大 体 如 下 : 先 把 yt 上 的 概率 P 扩张 为 wf 中 可 
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列 并 集合 所 成 的 类 终 上 的 集 函 r; 第 二 步 , 由 7 用 下 确 界 方法 在 多 (8) (8 的 一 切 
子 集 所 成 之 集 族 ) 上 定义 一 个 新 的 集 函 x*; 最 后 , 在 多 (2) 上 选 出 一 个 o 代数 9， 
把 x* 限制 在 乡 上 就 是 9 上 的 一 个 概率 . 下 面 我 们 进行 仔细 的 讨论 . 


P A 一 一 一 一 TFT” 
| 
P(N) 


图 1.1 概率 扩张 证 明 思 路 示意 图 








P 


设 yz 是 0 的 一 个 子 集 代数 ,P 是 (8, .x1) 上 的 概率 . 设 8 为 .中 可 列 并 集合 
所 成 的 类 , 则 多 可 表 为 











“ic G= [4 An€ rm, 4 


n= 二 1 
引 理 1.4.1 若 4 € ,Bn€ ,n>1,An1,B,1, 1m?1 An, <lim?t B,, 
则 有 
lim P(An,) < lim P(B,,). 
若 lim A = lim ff Bn, 则 
lim P(A,) = lim P(B,). 
证 对 固定 的 m, {AmBasn > 1} 是 of 上 的 单调 增 序列 , 目  (4wBa) = A 
n=1 
由 概率 的 序列 连续 性 , 有 
lim P(Bn) > lim P(AnB,) = P(A,,). 


再 令 m 一 co 即 得 结论 . 如 果 lim 了 hn = limf Bn, 则 由 于 {hw,n 1} 和 {Bn;n 之 
1} 地 位 对 称 , 所 以 上 面 的 不 等 式 应 变 为 等 式 . 


由 上 述 引 理 , 我 们 可 以 在 乡 上 定义 集 函 r 如 下 : 若 4 1 G, An e 好 , 则 定义 
7(G) = lim P(An). (1.4.1) 
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引 理 1.4.1 证 明了 7 的 定义 不 依赖 于 序列 {4n,n > 1} 的 选取 , 而 只 依赖 于 G. 因 
此 , 7 的 定义 是 不 含混 的 . 显然 , 若 A € ov, 则 r(4) = P(A4). 

乡 和 8 乡 上 的 集 函 TY 有 如 下 的 性 质 : 

(al)0e 乡 eeGir0)=0,r2)=1 且 


0gr(G) <1, vGey. 
(b) 设 G1,G2 € 9， 则 


GIUG2E€, GiNG2 EY [多 对 有 限 交 、 有 限 并 封闭 ] 


T(Gl) + A(G2) = (G1 UY G2) + A(G1N Go). [r 强 可 加 性 ] 


(ec) 设 Gil,Go < 乡 且 Gil S Gz, 则 
T(G1) < T(G2). [r 单调 性 ] 
(d) 如 果 Gn E 3, n>>1,Gn1G, 则 Ge 多 且 
7(G) = im "(Gn). [r 对 可 列 并 封闭 ] 


此 外 , 多 是 包含 x 且 具 有 上 述 性 质 的 最 小 类 . 


性 质 (a) ~ (c) 可 以 直接 验证 , 请 读者 自行 补 出 . 这 里 仅 证 明 性 质 (d). 设 Am,n 1 
Gn (mm 一 coj Amn EH, M,N>1, 以 及 Gn1TG. 记 


m 
Dm = | | Amn, 7m0 之 | 


n=1 


由 于 
Dm, C U Am+in C Dmi+1), 


n=1 
故 Dn,1? 且 DE 9. 当 n<m 时 ,有 
Am,n CS Dm CE Gm, 


从 而 
P(Amn) < P(Dn) < (Gm). 
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在 上 两 式 中 先 令 m 一 co 再 令 了 一 co, 得 DTG 以 及 





im P(Dm) = lim 7(Gm). 
于 是 Ge 且 r(G) = dim P(Dm) = lim (Gm). 性 质 (d) 得 证 . 
设 集 类 多 和 多 上 的 集 函 x 如 上 定义 , 在 多 (2) 上 定义 集 函 x*: 
TQ) =inf {x(G): MEGEY}. 


所 定义 的 集 函 x* 有 如 下 的 性 质 : 
(a) 对 任意 Ge 乡 , 有 m(G) = x(G), 且 


Og<mA) 1 vAe PN). 
(b) 对 任意 f21, 人 22 < ZN), 
A* (2 U {22) 十 A* (1 | {22) < TO ) 二 7*((22). 


特别 地 , 有 
mT (1) + rn"(RF) > 1 
(gj 设 人 5 ,其 中 2, 人 € (0), 则 (1) < (12). 
(d) 设 0 € 久 (Q), Qn 了 fw, 则 


lim 7*(f2,) = 7*(f2). 


nO00 


(1.4.2) 


性 质 (a) 由 定义 可 得 . 为 证 性 质 (b), 固定 。 > 0, 对 2 任意 两 个 子 集 人 0 和 2， 


取 G1,G2 e 5, 使 得 2; C Gi; 且 
mx( 人) 十 5 > (Gi), i=1,2, 
则 由 7 的 性 质 (b) 及 G1,G 的 取 法 , 有 


TQ) +A (2) + eA(G1) + (G2) 
一 T(G1 U Go2) 十 T(G1 Go2) 
之 A” (2 U f22) 十 7 (f(D 门 人 22 ). 


概率 论 教 程 COOOOOOOOOOOOOOOOOODO00O 


令 e 一 0 即 得 性 质 (b). 性 质 (c) 可 由 的 单调 性 直接 得 到 . 下 面 证 明 性 质 (d). 固 
定 e>0, 对 任意 n>1, 存 在 Gn € 多 ,使 得 2, SGn 且 


A(Gn) < A* (0) + i 
令 Go = U cn 则 Go eeGg, ccG' 且 GT. 故 
天 一 1 
PSElim1TG' egy. 

下 面 用 归纳 法 证 明 : ， 

r(G') < n(n) + > 去 : (1.4.3) 
由 {Gn} 的 取 法 知 , 当 n= 1 时 式 (1.4.3) 成 立 . 现 假 设 当 n = 时 式 (1.4.3) 成 立 ， 
则 下 证 当 n 二 +1 时 式 (1.4.3) 成 立 . 注意 到 由 Qk ES Vs 知人 EGRnGkH ee 多 ， 
我 们 有 

(Gh41) = (Gh U Gr) 
= A(GE) + (Gg) 一 TGF N Grrl) 


"(0+ 








+ | 天 Ge + Fi | -一 (0 
天 十 1 
= A (fp1) + > 记 . 
从 而 得 证 式 (1.4.3) 对 任意 n 成立. 令 n 一 00 得 
lim "(Qn) te > lm (G4) = (lm G,,) > (foo). 


由 于 e 是 任意 的 , 所 以 
lim (0 > 7*(f2%). 


和 一 OO 


另 一 方面 , 由 于 2，C 2, 故 根据 性 质 (c) 知 lmr*(P) < we*(f2w). 从 而 性 质 (d) 
得 证 . 

定理 1.4.1 设 巡 是 中 的 子 集 代 数 ,P 为 (2, 妈 ) 的 上 的 概率 , 多 (人) 上 的 集 函 
fr* 由 式 (1.4.2) 定义 , 则 1 的 子 集 类 


B={D: mrD) +4+T(D)=1, Dcn} 
一 个 o 代数 , x* 限制 在 上 是 (2, 多) 上 的 一 个 完备 概率 . 
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证 ” 先 证 明 多 是 一 个 代数 .由 mz* 的 性 质 (a), (从 = 7(0) = 0 (2) = 
(1)=1, 故 0 了,0e 多 .又 由 多 的 定义 知 多 对 余 运算 封闭 . 下 面 证 多 对 有 限 交 和 
有 限 并 运算 封闭 . 为 此 , 设 Di, De 多 , 由 x* 的 性 质 (b), 有 

7*(DiU D2) + (DiNMD2) < mT(Di) + 7 (D;), (1.4.4) 

mr*((DiU D2)) + Tr*((DiN D2)) < mr* (DG) + a* (DS). (1.4.5) 

两 式 相 加 , 由 Di, Da es 多 知 不 等 式 右边 等 于 2. 另 一 方面 , 由 x* 的 性 质 (b) 可 推出 
mT (D1 U D2) + mn*((DiU D2)°) > 1, (1.4.6) 

mrx*(Din Da) + ((DiND2))>1. (1.4.7) 

故 不 等 式 (1.4.4) 与 (1.4.5) 相 加 后 的 左边 之 和 不 小 于 2. 综 上 所 述 , 四 个 不 等 式 


(1.4.4) ~ (1.4.7) 中 只 能 成 立 等 号 . 由 式 (1.4.6) 和 (1.4.7) 知 D1U Da € 2, DiNn D2 € 
多 . 从 而 多 为 子 集 代数 . 
再 证 乡 是 o 代数 . 由 定理 1.3.1 知 我 们 仅 要 证 多 为 单调 类 即 可 . 为 此 , 设 

Du € 2, D, 1 D. 由 7* 性 质 (d), 得 z*(D) = limx*(Dn). 于 是 , 对 任意 e > 0, 存在 
N EN 使 得 , 当 n > NN 时 ， 

TD) < (Dn)+e. 
另 一 方面 ， 

nm(D) < nr(D), nl1. 

于 是 fr*(D) +xr*(Dce) 和 1+e 令 ee 一 0 得 

m(D)+m(D) Ll. 、 (1.4.8) 


由 x* 性 质 (b), 上 面相 反 不 等 式 也 成 立 , 故 式 (1.4.8) 中 等 号 成 立 , 即 D € 9. 再 设 
De 多 , D， | D, 利用 多 对 余 运 算 封 闭 , 那么 , 易 知  e 9. 于 是 多 的 单调 类 性 
质 得 证 . 

其 次 ,证明 x* 在 邻 上 的 限制 是 一 个 概率 . 由 天 的 性 质 (a), 只 要 证 明天 在 驴 
上 具有 o 可 加 性 . 注意 到 前 面 已 证 得 的 x* 的 强 可 加 性 , 即 


7*(D:i) + 7* (D2) 一 7* (D1 UD-») +7*(Di 门 D2), Y D1, D2» € 9. 


现 设 De 9, n > 1, 两 两 不 相交 , 则 六 Ds e 9, 且 由 rr* 的 性 质 (d) 知 
k=1 


"E00) -rr 
k=1 k=1 天 一 1 天 一 1 
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即 m* 在 多 上 具有 o 可 加 性 . 
最 后 证 明 完备 性 . 设 Di C D, De 多 且 二 *(D)==0. 由 天 的 性 质 (c) 知 





m+) <r (D)+A(Q)=0+1=1. (1.4.9) 

另 一 方面 , 由 x* 的 性 质 (b) 知 式 (1.4.9) 中 反 向 不 等 式 成 立 , 从 而 式 (1.4.9) 中 等 号 
成 立 , 即 fi e 2. 完备 性 证 毕 . | 

由 定理 1.4.1 可 以 推出 著名 的 概率 扩张 定理 . 

定理 1.4.2 (概率 扩张 定理 ) 每 个 定义 在 2 的 子 集 代数 gf 上 的 概率 可 以 唯一 
扩张 为 ol(x) 上 的 概率 . 

证 设 P 是 代数 gy 上 的 概率 , 把 定理 1.4.1 的 结论 用 到 本 节 定 义 类 儿 和 集 函 
7 上 . 注意 到 在 wt 上, x 和 * 相同 , 都 等 于 P. 由 CB 和 多 是 一 个 o 代数 知 
alog)c 9; 把 六 限制 于 oly) 而 得 到 的 集 函 P' 是 P 在 (wz) 上 的 一 个 扩张 . 

为 证 P 在 xfez) 上 扩张 的 唯一 性 . 设 Pl 和 Ps 是 o(xY) 上 的 两 个 概率 , 满足 
当 4e gy 时 , P1(4) = Pz(4) =P(4). 令 

B=1{B: P1(B) = P2(B), B eol)}. 


显然 , of C 罗 Co(f). 由 定理 1.3.1, 欲 证 明 多 = clez), 仅 证 明 多 为 一 个 单调 类 . 
为 此 , 设 Be 多 , Bu 1 B, 则 Be ol(yY). 由 概率 的 单调 序列 的 连续 性 (定理 1.3.4)， 
得 到 
Pi1(B) = lim Pi(Bn) = lim P2(Bn) = Pa(B), 

即 Be 多. 同 理 , 对 任意 Be 多 , Bn | B, 则 Be 多. 故 久 为 一 个 单调 类 . 本 定理 
证 毕 . 和 

上 述 的 概率 扩张 定理 是 从 定义 在 代数 上 的 概率 向 o 代数 扩张 . 但 代数 的 结构 
还 不 是 最 简单 的 , 例如 直线 上 所 有 左 开 右 闭 区 间 所 组 成 的 集 类 就 不 是 代数 , 但 在 这 
种 集 类 上 比较 容易 定义 一 个 o 加 性 集 函 . 所 以 一 个 很 自然 的 问题 是 , 扩张 定理 能 
否 从 定义 在 比 代 数 更 简单 的 集 类 上 的 o 加 性 集 函 开始 ? 回答 是 肯定 的 , 为 此 我 们 
需要 如 下 的 定义 . 

定义 1.4.1 车 8 的 一 个 子 集 类 .9 满足 下 列 条 件 : 

(a) 0, 2 <e .7， 

(bp) .多 在 有 限 交 运算 下 封闭 ， 


22 


OHOOOOOOOOOOOOOOOOOO 第 1 章 概率 空间 


(@) 若 Se .9, 则 5° 是 .9 中 两 两 不 交 元 素 的 有 限 并 ， 
则 称 . 为 2 上 的 一 个 子 集 半 代 数 , 简称 半 代数 . 
由 定义 知 半 代数 是 一 个 r 系 . 


例 1.4.1 定理 1.2.1 中 的 子 集 类 哆 是 包含 多 的 半 代 数 , 这 可 以 从 定理 的 证 明 
中 看 出 哆 中 集合 的 余 集 是 有 限 个 多 中 集合 的 不 交 并 . 4 
例 1.4.2 设 1 = 民 ?, 令 


FF = {a x (02,b2]: 一 co & a & bi < +o0, 1 = 1,2}, 


这 里 当 b; = 十 oo 时 , 区 间 (ai bi] 改 为 开 区 间 (ai bi). 显然 , .9 满足 半 代 数 定义 1.4.1 
中 的 前 两 条 (a) 和 (b), 余下 来 需 验 证 条 件 (c). 注意 到 
((a,bl x (c,dl): =R x (-o0,c| + Rx (d,+o0) 
十 (—00,a] x {c,d] + ,+00) x (cd]， 
故 .9 满足 条 件 (c), 故 .9 是 R2 上 的 一 个 半 代 数 . 4 
例 1.4.3 设 人 =R”> 全 {(z1,7x2,.…) :zi ER,icN), 邻 


FF={A1x A x x An xR™”: Ae BR), 1<ign,neNy{}), 


则 .是 展 %> 上 的 一 个 半 代 数 . 


事实 上 , .9 显然 满足 定义 1.4.1 中 的 前 两 条 (a) 和 (b), 余下 来 需 验 证 条 件 (c). 
设 A= Ailx A2x:…x An x 及 ”> € .9, 由 于 


本 =》 ArxASx...x A xR™, 
其 中 4; 等 于 4; 或 ht, 求 和 号 是 对 除了 “A* 二 4, 1 i<n” 以 外 的 其 余 搭 配 进 
行 ( 共 27 一 1 项 ). 因为 A; € 络 (RR), 故 4A} € 多 (R), 1 <ign, 从 而 Ai xx:…x 
A* x 民 % Ee .7, 而 A 为 .中 27 一 1 个 两 两 不 交 的 元 素 的 并 , 故 .9 满足 定义 1.4.1 
中 的 条 件 (c). 因此 , .9 是 R% 上 的 一 个 半 代 数 . 4 


注 在 例 1.4.3 中 , Borel 集 4; 改 为 左 开 右 闭 区 间 后 所 得 到 的 子 集 类 仍 是 RR~ 
上 的 一 个 半 代 数 . 实际 上 , 半 代 数 的 概念 就 是 从 上 述 R* 上 的 半 开 半 闭 长 方 体 集合 
中 抽象 出 来 的 . 
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定理 1.4.3 设 . 罗 是 由 上 的 一 个 半 代 数 , 则 由 .7 生成 的 代数 wg 是 由 .多 中 两 两 
不 交集 合 之 有 限 并 组 成 . 若 P 是 .多 到 [0,1] 上 的 一 个 o 加 性 集 函 , 满足 P(C) = 1. 
设 4= 5;, 5; € .8,ieE TT 有 限 , 则 在 .of 上 可 以 定义 如 下 的 一 个 集 函 P': 
i€I 


iET 
该 集 函 不 依赖 于 4 的 表达 式 , 且 是 P 在 代数 gf 上 唯一 的 扩张 . 此 外 , P' 还 是 ft 上 
的 一 个 概率 . 
证 分 以 下 四 步 来 证 明 . 首先 证 明 sx 是 一 个 代数 . 由 兄 CE op, 得 O00€ dA. 
设 A= Si€ ,B= SE ,其 中 5;,S;€ .9, 了 和 J 有 限 , 则 
《GE 了 jEJ 


29 了 
ANB=) ) SNS < 好 
i€I jE€J 
(因为 S05 < .多 且 彼 此 不 交 ), 即 ot 对 有 限 交 运算 封闭 . 另外 , 由 .9 的 半 代 数 
性 质 , 得 4* = 一 所 竺 且 如 <e ,i ET 根据 已 证 得 的 wf 对 有 限 交 运算 封闭 性 , 有 
4 Ecoy， 即 or 对 余 运 算 封 闭 . 因此 , sf 为 一 个 包含 .7 的 代数 
再 证 明 P' 定义 的 合理 性 . 设 A Ee x 且 4 可 表 为 
4=》 8=》 3 
YE 了 jE€EJ 
其 中 5i,5; € .79,T 和 J 了 有限, 则 5; = DD 网 3) = 2 55 利用 P 在 .上 的 o 
可 加 性 , 得 


》 P(S)] = > YP(SiS)) = > > P(Si5)) = 》 P(S1) 


EI i€T jE€EJ JE i€T jEJ 
由 此 知 P' 是 .w 上 一 个 集 函 , 其 定义 是 不 含混 的 . 


其 次 证 明 P' 是 gf 上 的 一 个 概率 . 这 只 要 证 明 P' 在 gf 上 具有 可 加 性 . 为 
此 , 设 S= 》 595ic 必 ,其 中 9e 必 ieN, 欲 证 
?一 工 


$5)= 2 P'(5). 
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由 SE xf 知 存在 Bk € .9 ,ke K, 使 得 $= 3 Bx, 其 中 K 有 限 .于 是 
kEK < 


P'(5) = > P(Bx). 


kEK 


另 一 方面 , 由 Si € x4 知 存在 Si € .9,j € i, 使 得 5; 二 > Si;, 其 中 有限 .于 是 
jE 


Bi — » BkS; = > DBrSiy 且 BrSiy€e.y. 


i=1 i=1 jE 


利用 PP 在 .上 的 o 可 加 性 ,得 


Ce 


P(Bx) 一 》、 》， P(CBk9i7)， 8 E 五， 


t=1 JEJ: 
进而 有 


P’'(S) = > >》>， 阳 Paess) = >》 >》 ， P(Si;) = 2_P'(Si). 


i=1 jEJi LEE 下 i=1 jE 


最 后 证 明 扩 张 的 唯一 性 . 设 P; 和 P 为 gf 上 的 两 个 概率 , 有 是 为 上 集 函 P 
.的 两 个 扩张 . 记 
B=1{B: Pi1(B)=P2(B), Beat 


则 9 C 多 5 wy 车 能 证 明 多 为 代数 , 则 多 = .yf, 即 在 gt 上 PP 的 扩张 是 唯一 
的 . 往 证 多 是 代数 , 这 只 要 证 明 多 对 有 限 交 运算 封闭 . 为 此 , 设 B1, Be 及 则 
Bi = > Si € 2Y, 其 中 Si; € .9 ,jE Ji, 目 J; 有 限 ,i = 1,2. 于 是 

iEJ; 


Bi NB, = 》， 》 Si N So Ef 


jEN kEJ2 
是 
Pi1(B1B») = 》， 》， Pi1(S1; S2k) = 》， >》， P2(S1;S2k) = Pz( Bi DB2). 
TE. kE Ts JTE. kET2 
故 Bi1B2 e 绍 . 定理 证 毕 . 昌 


由 定理 1.4.3 和 概率 扩张 定理 (定理 1.4.2), 只 要 在 半 代 数 .% 上 定义 一 个 满足 
P(8) = 1 的 o 加 性 集 函 P, 则 我 们 就 能 把 P 唯一 开拓 为 由 .9 所 生成 的 o 代数 
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o(.%) 上 的 概率 . 这 在 应 用 中 是 非常 方便 的 . 进一步 的 讨论 表明 , 我 们 还 可 以 先 在 一 
个 包含 和 4 和 22 的 r 系 上 定义 满足 P(2) = 1 的 一 个 o 加 性 集 函 P (如 果 这 样 的 集 
函 存 在 ), 然后 把 它 唯 一 开拓 为 c(.9) 上 的 概率 (见习 题 32). 

在 应 用 中 遇 到 的 一 类 问题 是 要 验证 集 函 P 是 o 代数 ft 上 的 概率 . 如 果 ox 是 
由 半 代 数 多 或 r 系 名 所 生成 , 则 根据 上 述 定理 , 我 们 只 要 验证 P 是 .或 名 上 满 
足 P( 人 =1 的 vc 加 性 集 函 即 可 . 一 般 而 言 , 这 种 验证 要 方便 得 多 , 我 们 今后 将 不 断 
地 要 用 到 它 . 


1.5 概率 和 分 布 函数 的 一 一 对 应 


欧 氏 空间 民 * 中 所 有 长 方 体 ( 开 的 、 闭 的 或 半 开 半 闭 的 ) 所 构成 的 类 .9 是 一 
个 半 代 数 , 不 交 长 方 体 有 限 和 的 全 体 构 成 R" 的 一 个 代数 . 以 下 我 们 用 多 表示 
由 .9 生成 的 o 代数 , 称 为 Borel 域 . 当 n ==1 时 , 由 于 及 的 每 个 区 间 以 及 RR 的 每 个 
开 集 都 由 开 区 间 的 可 列 并 或 可 列 交 组 成 , 故 多 (全 多 也 是 包含 所 有 开 集 的 最 小 o 
代数 . 多 中 的 集合 称 为 Borel 集 . 研究 R" 中 的 Borel 域 上 的 完备 概率 是 一 个 非常 
重要 的 课题 . 然而 由 于 概率 是 集 函 数 , 故 不 便 用 古典 的 分 析 工 具 来 处 理 . 由 于 现 有 
分 析 中 的 各 种 方法 基本 上 是 处 理 R* 上 的 有 限 点 函数 , 所 以 如 果 能 够 建立 一 种 渠道 
把 概率 和 了 "中 的 某 种 点 函数 建立 起 一 一 对 应 关系 , 则 它 具 有 极为 重要 的 方法 学 上 
的 意义 . 下 面 我 们 将 指出 , 在 及 上 确 有 那么 一 类 点 函数 可 以 和 概率 建立 一 一 对 应 关 
系 . 借助 于 这 种 一 一 对 应 , 我 们 把 对 概率 (以 及 随 之 而 来 的 积分 ) 的 研究 归结 为 相应 
点 函数 的 研究 . 

在 与 概率 建立 一 一 对 应 关系 的 点 函数 中 ， 有 两 种 是 最 基本 的 .一 是 分 布 函数 
(distribution function, 缩写 为 df.), 从 测度 论 观点 看 , 它 体现 了 对 有 限 区 间 取 有 限 
值 的 那 一 类 测度 , 即 Lebesgue Stieltjes 测度 . 另 一 种 是 特征 函数 (characteristic fune- 
tion, 缩写 为 cf.), 它 体现 了 概率 问题 中 需要 用 到 的 有 限 Lebesgue Stieltjes 测度 的 
一 个 子 类 , 我 们 将 在 第 5 章 中 研究 它们 . 下 面 我 们 研究 分 布 函数 与 概率 的 对 应 关系 . 

定义 1.5.1 设 F(x) 是 了 及 上 的 一 个 实 值 函数 ,如 果 F(z) 非 减 、 右 连续 且 
lim F(z)=0, slim, F(X) = 1, 则 称 (x) 为 分 布 函数 , 记 为 df.. 


对 恨 ” 中 分 布 函 数 的 定义 , 我们 需要 如 下 记号 : 设 a = (a1,… ,an) € R", 
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b 二 (b1,… ,ba) E R"; a < 5b 是 指 对 一 切 i, 有 a; < bi; a < bs 是 指 对 一 切 i, 有 
ai 所 bi; 记 
(a, bl] 一 (a1, bi] x (a2, pa] Xx (an bnl; 
设 FF 是 民 * 上 的 实 值 函数 , 定义 玉 的 增 量 为 
Fla,bl| 一 Ap_afF (a) 一 Au -oa -An -ao 下 (al， 0 , Qn), 


其 中 对 每 个 k, An _。 表示 在 bk 一 ax 段 上 作用 于 ax 的 差分 算 子 . 例如 , 当 n=2 
时 , 有 
F(a, bl 一 人 Am -oa Ab -aas 开 (al,as) 
= Ap_alF(a1,b2) — F(a1, a2)| 
= [F(b1,b2) — F(a1,b2)] — [F(b1,a2) — Fla1, a2)] 
一 F(bi, b2) 一 F(ai, b2) 一 Fl(b1, a2) 十 F(ai, a2). 
定义 1.5.2 设 斑 为 有 Rr* 上 的 实 值 函 数 . 称 玉 为 有 R* 上 的 一 个 分 布 函 数 , 如 果 
五 满足 以 下 三 条 : 
(a) 若 对 某 个 i, zi 一 一 co, 则 


P(r Ti ,Tn) —» 0. (1.5.1) 
若 对 一 切 宫 1 <ign, zi 一 十 oo, 则 
F(z ,Tis Tn) — 1. (1.5.2) 


(b) 对 任意 a < b, F(a,b|= Ap_aF(a)>0. 
(c) 当 5 a( 即 对 一 切 i1&ign, bi1 a) 时 , F(a,b] 一 0. 


注 车 把 式 (1.5.1) 和 (1.5.2) 中 的 0 和 1 分 别 改 为 ci 和 co, 其 中 0& csc2o<1, 
则 称 FF 为 广义 分 布 函数 . 经 过 简单 的 线性 变换 , 广义 分 布 函数 可 以 化 为 分 布 函数 . 
以 后 可 以 看 到 , 两 者 的 主要 区 别 可 从 对 应 的 可 测 函 数 看 出 . 若 广义 分 布 函数 下 满足 
式 (1.5.1) ( 即 cl = 0), 则 对 应 的 可 测 函 数 在 +oo 处 的 测度 大 于 零 , 而 分 布 水 数 对 应 
的 可 测 函 数 在 +eco 处 的 测度 为 零 . 因此 对 于 任 一 分 布 函数 F, 必 存 在 一 个 随机 变 
量 (向 量 ), 使 它 的 分 布 就 是 FF. 

对 广义 分 布 函数 而 言 , 定义 它 的 单调 性 条 件 (b) 是 本 质 的 ， 例 如, 当 n=1 
时 , 如 果 加 上 右 连 续 性 , 则 广义 分 布 函数 互 可 由 屎 中 任 一 笛 集 D 上 的 值 所 唯一 
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确定 . 事实 上 , 设 万 为 及 中 稠 集 ，FPp 表示 在 D 上 定义 的 介 于 0, 1 之 间 的 非 减 函 
数 . 不 失 一 般 性 , 可 假定 Fp 在 D 上 右 连 续 (否则 , 当 z 为 D 中 连续 点 时 , 定义 
F(T) = Fp(zx); 当 xw ED 但 不 是 D 中 连续 点 时 , 定义 F(x) = Jim Fp(zn), 其 中 
zn ED, 则 Fb 为 D 上 的 右 连续 函数 ). 然后 定义 及 上 的 函数 下: 


F(z) = Jim Fp (zn), Zn > 2, Tn E D, 


则 由 广义 分 布 函数 的 定义 知 玉 为 广义 分 布 函数 . 从 而 , 若 两 个 广义 分 布 函数 在 民 
的 一 个 稠 子 集 上 相等 , 则 它们 必然 处 处 相等 . 直线 上 常用 的 笛子 集 是 有 理 点 集 和 二 
分 点 子 集 , 即 可 表 为 形 如 上 .2-” 的 数 全 体 , 其 中 疡 mEZ,Z 为 所 有 整数 集合 . 它们 
都 是 可 数 的 , 因此 广义 分 布 函数 的 值 本 质 上 由 在 民 上 稠密 的 可 列子 集 上 所 取 的 值 
所 唯一 确定 . 这 是 我 们 将 来 讨论 分 布 函数 有 关 性 质 的 关键 之 点 . 同样 , R* 上 的 分 
布 函数 (或 广义 分 布 函数 ) 也 是 由 在 R" 中 稠密 子 集 上 的 值 所 唯一 确定 . 最 常用 的 
釉 子 集 仍 是 及 ”中 的 有 理 点 集 


Q" = {(q dan): qi 为 有 理 数 , 1 < i < n} 
及 二 分 点 子 集 
D"*={(diy ,dn): d=ri2 ,rkeZ, 1<ign}. 
下 面 我 们 来 建立 直线 上 的 概率 与 分 布 函数 之 间 的 关系 . 
定理 1.5.1 设 了 为 可 测 空间 (R, 多 ) 上 的 概率 , 则 由 公式 
P(Azs) = F(z), As = (-o00,7%], ze 了 
建立 了 (R, 多 ) 上 的 概率 P 和 到 上 的 点 函数 斑 之 间 的 一 一 对 应 关系 . 


证 设 P 是 (了 R, 匈 ) 上 的 概率 , 易 证 由 F(z) = P(4。) 所 定义 的 函数 下 是 分 布 
沙 数 . 反之 , 设 下 是 分 布 函数 , .9 是 有 上 所 有 左 开 右 闭 区 间 所 构成 的 半 代 数 , 即 


7 = {(a,0]: —o0 < a <b < +o0), 
其 中 约定 当 b= +eo 时 , (a,] 即 为 (a, 十 oo). 在 .9 上 定义 集 函 P 如 下 : 
P((a,0]) = F(b)— F(a), ~ <oa bg+o, 
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其 中 下 (一 oo) = 0, F(+00) = 1. 由 定理 1.4.3, 下 面 我 们 要 证 明 P 在 .上 是 o 加 性 
的 , 即 车 了 = 和 万 ,其 中 了 = (a,9], == (Qn,bn], nn 之 1, 则 
n=1 


P(D) = > P(I,). (1.5.3) 


对 于 每 个 固定 的 n, 必要 时 调整 下 标 , 不 妨 设 


a<a<b a < :<an <b, <b, 


则 
>- Dre) - Fat)] 
<> reo - Pool+ TF (ez+1) 一 下 (ppj] 
FO) la) < POW Page 
令 n 一 o0 得 nm 
DP(1) < P(7). (1.5.4) 
k=1 


下 面 分 情形 证 明 式 (1.5.4) 反 向 不 等 式 成 立 . 
先 考虑 a <b 且 有 限 情形 . 取 e> 0 使 得 a<8-e 记 天 =[e+eb. 由 互 的 
右 连 续 性 质 知 , 对 任意 mn > 1, 必 存 在 en > 0, 使 得 


Flbn + en) — Flbn) < 二 (1.5.5) 


令 瑟 二 (awwbr+en)yn>4 则 TC 五, 即 {五 ,n 之 1} 构成 了 1 的 开 履 盖 . 由 
Heine-Borel 有 限 覆 盖 定理 知 , Fe 存在 有 限 开 覆 盖 , 记 之 为 {1$,j 二 1,.… ,N}. 取 
<N, 使 5e ;车 ar, >a+te 则 取 k2 < NN, 使 ar, E16; 若 ar,>a++e 则 取 
ka 所 和 N, 使 arp。 € TE ; , 直到 有 某 个 km < N 使 ak <a+e 为止 (因为 只 有 
N 个 区 间 , 故 最 多 只 能 选取 NN 次 ). 将 选取 剩余 的 区 间 丢 掉 不 计 , 并 适当 调整 下 标 
(如 果 有 必要 ), 即 得 ( 见 图 1.2) 


rc 
k=]1 
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Q 十 bl+e ba+te2 + bm-_1+ Em-_1 bm 十 em 








六 和 二 条 一 一 生生 一 乱 一 一 一 ) 


图 1.2 大 的 有 限 开 覆盖 


其 中 天 = (Qk,bx 十 ek) 同 前 , 且 


01<QG 十 E< 贞 十 6l， 
Qgt1 < bk Ek < bptit ektl, 大 二 12 70 一 1 


am <b < bm 十 cm- 


令 e 一 0 得 


结合 式 (1.5.4) 和 (1.5.6) 即 得 式 (1.5.3). 


(1.5.6) 


再 考虑 a = -co 和 4b 有限 情形 ， 由 于 当 m+? 十 oo 时 , 已 (-mm) 4 0, 故 对 任 给 的 


e > 0, 可 取 m, 使 得 F(-m) <e. 由 式 (1.5.6) 得 
F(b) — F(-—m) 入 >》 PP 
天 一 工 
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于 是 _ 
P(UD) = [F(6)— F(-m)] + F(-m) < DOP(I) +e. 
k=1 
邻 。 0 式 (1.5.6) 仍 成 立 , 从 而 式 (1.5.3) 仍 正确 ， 其 他 情形 可 类 似 证 明 .本 定理 
证 毕 . 


注 如 果 把 (及, 多) 换 成 (R4, 多 四), de N, 则 上 述 证 明 及 结论 仍 能 逐 字 逐 句 保 
持 有 效 , 仅 需 把 a,b,z 等 解释 为 Re 中 的 点 . 

推论 1.5.1 若 令 F(z) = zyYze[0U, 则 分 布 函数 的 增 量 F(8) -F(a) 即 为 
[0,1] 中 子 区 闻 [a,0] 的 长 度 . 该 “长 度 ” 对 应 了 多 上 的 一 个 概率 P, 它 是 多 上 的 
Borel 测度 , 把 多 完备 化 为 乡 , 则 多 中 的 集合 即 为 Lebesgue 可 测 集 . 


1.6 独立 性 


事件 的 独立 性 是 概率 论 中 最 重要 的 概念 之 一 . 本 节 先 引入 独立 性 的 定义 , 然后 
给 出 一 个 关于 独立 的 判别 准则 . 进一步 的 讨论 将 在 以 后 各 章 中 陆续 进行 . 此 外 , 本 
节 讨 论 时 都 采用 一 个 固定 的 概率 空间 (82, .7,P). 
定义 1.6.1 设 了 为 一 个 有 限 下 标 集合 . x 的 一 个 子 o 代数 有 限 族 {8;,i € 了 
称 为 关于 卫 独立 , 若 对 任意 Bi E 1 所 了 有 
P (N 3 = 1[P(8;). (1.6.1) 
i€T GE 了 
2Y 的 一 个 子 c 代数 无 限 族 { 有 ii e 了 }, 其 中 工 为 无 限 下 标 集合 , 称 为 关于 了 独立 ， 
车 其 任意 有 限 子 族 是 独立 的 . 
取 多 ; = {0, 0, 和 i, 45), 其 中 Ai € Yi ET, 则 {多 i,ieE 了 的 独立 性 等 价 于 事 
件 族 {hi,ie 了 相互 独立 . 
定理 1.6.1( 独 立 性 判别 准则 ) 设 {多 ,ie 1 是 .x 中 一 族 包含 8 的 关系 , 它 具 
有 如 下 性 质 : 对 任意 Cj < 多, jE J CT J 为 有 限 的 下 标 集 , 有 


P (n 0 = [LP(6;), (1.6.2) 


jeJ jeJ 
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则 c 代数 族 {c( 饭 ) 全 多;,ie IT} 相互 独立 . 若 令 
B={BUN: Be®, New HP(N)=0), 
则 {多 /,i e 了 1} 也 是 独立 的 . 
证 当 工 有 限时 , 选 定 ie 7, 令 


a {7 Dew,P ne =P(D)II[P(C;), YO; es %, re 


Ji 5 
由 式 (1.6.2) 知 , 饭 C 多 . 注意 到 多 是 r 系 , 由 定理 1.3.3, 欲 证 多 ; C 多 , 我 们 只 要 
证 明 9 为 入 系 即 可 . 
( 8 € 9, 这 是 显然 的 . 
(2) 设 Di, Da € 9 且 D1 C D2. 对 任意 取 定 的 Cj e 多 ,jE1T, 记 C= NG 
j¥i 
则 


P((Ds - Di)C) = P(D2C - DiC) = P(D2C) — P(D1C) 
= P(D2) [[P(C;) =P(D) TPO;) 
IJ 天 5 I#i 
= 了 P(Da - D1) IIP(C;), 
ji 
于 是 Ds - Di e 9, 即 9 对 真 差 运算 封闭 . 
(3) 设 De 9 D, 1 D, C 的 记号 同上 . 由 概率 的 单调 连续 性 ( 见 定理 1.3.4) 
及 P(DnC) = P(Dn,)P(C), n> 1 我们 有 
P(DC)= lim P(DnC)= lim P(Dn)P(C)=P(D)P(C), 

于 是 De 2. 


由 上 可 知 9 是 和 系 , 故 甩 = 入 (人 饭 ) C 9, 从 而 子 集 族 { 绍 :, 儿 ,j 关 计 就 具有 
式 (1.6.2) 的 性 质 . 对 余下 的 j € 1, j 头 i, 重复 上 面 的 论证 , 逐个 把 多 换 成 8;, 我 
们 就 证 得 了 {多 ;,i e 了 的 独立 性 . 

当 了 无 限时 , 由 子 o 代数 族 {gg;,i e 1} 的 独立 性 的 定义 , 只 要 证 明 对 任意 有 
限 的 下 标 集 J C 1, {多 ;,j € 7} 具有 独立 性 . 但 已 证 明了 当 J 有 限时 { 有 jj € J 
的 独立 性 , 故 当 了 无 限时 定理 结论 仍 成 立 
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最 后 证 明 {好 ,i e 了 1} 的 独立 性 . 任意 取 定 有 限 7, J C 7, 对 任意 B’ = Bi U Ni， 
其 中 B; € Bi;, N; €E 9 H P(N;)=0,7e€.J, 有 


MB;c NN Be (ns) (Us). 


jE€EJ jEJ JEJ jEJ 


于 是 


P (n 5 <P na <P (n 5 +P (v 站 =P (na . 


注意 到 P(B;) = P(Bj), j e J 立 得 


P (n 加 =P (n 5 = [Pr(B;)= TI Pr(B’). 


jEJ jEJ jEJ jeJ 
所 以 { 纺 ,j es J} 上 共有 独立 性 . 由 此 也 推出 , 无 论 工 有 限 还 是 无 限 , {82',i € 了] 也 相 
互 独立 . 定理 证 毕 . 


推论 1.6.1 设 {多 ,i E71} 是 oz 的 独立 子 o 代数 族 , 且 { 万 ,7 e J} 是 一 族 两 两 
不 交 的 工 的 子 集 , 则 {多 7,,j es J 仍 是 独立 的 , 其 中 多 ;, 表示 由 {好 ,i & 万 } 生成 
的 ce 代数 . 


证 定义 .x 的 子 集 族 


-NB Be he K cD, K 有 限 )} 了 JE/ 


keEK 


则 {i;,j e J 是 包含 2 的 系 , 且 满 足 定理 1.6.1 中 的 条 件 . 另 一 方面 , 1， = 
o(i;), jE J. 故 由 定理 1.6.1 立 得 本 推论 . 


推论 1.6.2 设 事件 阵列 


411，412，…: 
421，42a2，…: 


是 独立 的 , 这 里 每 行 是 有 限 个 或 可 数 个 事件 , 7 是 行 标 集合 , 行 数 |1| 也 是 有 限 或 可 
数 的 . 以 多 ; 记 第 i 行 所 生成 的 o 代数 ,ie J 则 {2;,i e I} 是 相互 独立 的 . 
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证 令 4 表示 由 第 i 行事 件 的 所 有 有 限 交 所 组 成 的 事件 类 , 则 gf 是 关系 , 且 
0(24) = Fi,iET. 设 了 是 了 的 一 个 有 限 子 集 ,对 每 个 ie 小 在 好 中 任 取 一 个 事件 
Ci, i & J， 由 定义 , Ci 可 表 为 有 限 个 第 i 行 中 事件 的 交 . 设 Ci = 门 jex, hij, i EJ 
Ki 有 限 , 则 由 hi 的 独立 性 有 


(Ne) -=° (NM) -DH 


i€J i€J IER:; i€J jEK: 
=]IP ( 门 | = [[P(cy)， 
i€J JE 下 ii i€EJ 

即 {4,i e J} 满足 式 (1.6.2). 从 而 由 定理 1.6.1 推出 结论 . 用 

这 里 顺便 指出 , 关于 事件 独立 性 的 概念 中 , 除了 相互 独立 外 , 还 有 一 个 比 相互 
独立 较 弱 的 两 两 独立 的 概念 . 

定义 1.6.2 事件 族 {hi,i e 了 称 为 两 两 独立 , 如 果 对 了 工 中 任意 两 个 下 标 ; 和 
7,， 有 

P(AiA;) = P(Ai) P(A;), ij. 

例 1.6.1 把 一 个 硬币 括 ”次 , 以 4; 表示 第 i 次 撕 出 国徽 向 上 这 一 事件 , 1 < 
i 乏 7 令 An+1 表示 叶 次 投 括 中 出 现 偶数 次 国徽 向 上 这 一 事件 . 由 于 441 依赖 于 
史 次 投掷 的 结果 , 故 显 然 A1,… ,4 4n+l 这 mn 十 1 个 事件 不 可 能 相互 独立 . 

事实 上 ， 


P(A4142.… An+1) = 了 ({ 每 次 都 搓 出 国徽, 且 国 微 出 现 总 次 数 为 偶数 }) 


_ J 2%, 若 nn 为 偶数 
0， 车 nn 为 奇数 


A P(A1) -P(An) P(Ant1) = 2 


EAI 


了 的 偶数 


男 一 方面 , 在 这 n +1 个 事件 中 任 取 j 个 事件 , 1 < j 和 n, 则 必 有 


其 中 


P(Ar, :Ax) = P(Ap) P(A,) = (3) (1.6.3) 
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其 中 1< <…<k n+1. 事实 上 , 若 这 了 个 事件 来 自 于 {41,… ,A%}, 则 由 
掷 币 独 立 性 知 式 (1.6.3) 成 立 . 车 这 ; 个 事件 中 有 一 个 为 An+1, 其 余 ;一 1 个 事件 
来 自 于 {41,… ,An}, 不 妨 设 为 4 ji+2…… ,An. 如 果 了 为 奇数 , 则 
P(4j+t2… An Ant+1) 
二 P{ 前 nw 一 j 十 1 次 出 现 偶数 次 国 微 向 上 ， 
第 n 一 j 十 2,…, 第 n 次 都 是 国徽 向 上 } 
二 P{ 前 n 一 7 十 1 次 出 现 偶数 次 国徽 向 上 } P(An_j+2… hn) 
1 AN /iY 
的 -全 
当 了 为 偶数 时 , 进行 同样 讨论 可 得 相同 结论 . 故 
了 
PC Ah)= (了 = PC-ra PP 
这 说 明 41,-… ,An, An+1 这 n 十 1 个 事件 中 任 取 ;7 (7 < n) 个 事件 , 则 这 7 个 事件 
都 是 相互 独立 的 , 而 这 n 十 1 个 事件 却 不 是 相互 独立 . 4 
下 面 我 们 给 出 独立 事件 的 引 理 , 这 在 极限 理论 中 经 常用 到 . 
引 理 1.6.1(Borel-Cantelli) 设 {hn,n > 1} 为 一 列 独立 事件 , 则 
和 plh， ) = 二 oo 一 p (limsup 4 ) =: 


n=1 
证 由 于 概率 测度 有 限 , 故 只 要 证 明 Plliminf 4A)=0 即 可 . 注意 到 
Pp (liminf 4% ) =P (L 人 | 4] = lim P (A 人 . 
n=1 k=n 


由 于 骨 4s 1, 故 只 要 证 明 对 每 个 n,P( 内 A5) =0. 利用 ez>1 vvYVzz0 及 
k=n k= 
事件 {hi,n > 1} 相互 独立 性 , 我 们 有 


nt+m n+tm 
人 门 [= I[ {1— P(A) < exp{—P(Ax)} 
k=n 


k= 


-on{- 沁 Po 
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由 于 器 PC4。) 发 散 , 故 对 任意 给 定 的 由 当 m +00 时， P(Ak) = +oo. 于 是 
k=n 


对 每 个 固定 的 n, 都 有 


oo n+m 
C _ 了 C 一 
0 me (Fi 3 ~ 
一 亿 =n 


因此 , 引 理 成 立 . 


36 


引 理 1.3.1 和 引 理 1.6.1 统称 为 Borel-Cantelli 引 理 . 关于 引 理 1.6.1 中 事件 相 
互 独立 还 可 进一步 放宽 为 两 两 独立 . 


1.7 习题 


. 证 明 引 理 1.1.1 可 以 推广 到 可 列 事件 族 . 
. 证 明定 理 1.3.3. 
. 证 明 下 列 等 式 : 


(1) (AAB)AC = AA(BAO), 

(2) (AAB)A(BAC) = 4AC， 

(3) (AAB)A(CAD) = (AAOC)A(BAD), 
(4) AAB = C0 <> A= BAO, 

(5) AAB = CAD 二 > AAC = BAD. 


. 设 41, 42,… ,An 为 n 个 事件 , 令 


Us =\) (hi Nn Ais NN Ai), Ws = {ha YU Ais UU Ai), 


呆 


其 中 凯 和 门 是 对 所 有 满足 1 < 宙 <… 


Ux = Whngt1: 


. 对 任意 集合 序列 {An,n > 1}, 令 


<ii 世 nn 的 (i,… 


Bi=Ai1, Bnti= BrnAAnti,， Nn 之 1, 


证 明 lim Bn 存在 的 充 要 条 件 是 lim A = 6. 


,ix) 进行 的 . 


证 明 


10. 


11. 


12. 
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. 设 4。 表示 把 正方 形 集合 {(zx,y) : |z| 二 1,|y| < 1} 旋转 2xm6 所 得 的 集合 , 给 出 下 面 


情形 下 lim sup 4。 和 lim inf A 的 表示 : 

(1) 0 = 1/8; 

(2) 8 是 有 理 数 ; 

(3) 9 是 无 理 数 (提示 : 2xn9 在 模 2r 之 后 的 余数 在 [0,2r] 中 释 密 ). 


. 问 能 否 把 定理 1.2.1 中 有 限 运 算 改 为 可 列 运算 , 从 而 得 到 由 多 所 生成 的 o 代数 ? 
. 设 罗 和 有 是 两 个 集 类 , 且 多 < 多 ,证 明 : 


(1) 车 多 为 代数 , 且 多 为 单调 类 , 则 c( 多 ) C 史 . 
(2) 车 多 为 x 系 , 且 多 为 和 系 , 则 o(%)C 多 . 


. 设 名 是 一 个 集 类 , 证 明 : 


(1) m( 多 ) = o(%) 当 且 仅 当 
4eg 一 4cmlG)ji 4BeG 多 一 4nB5Bem(G). 
(2) (多 ) = o() 当 且 仅 当 
4Begg 一 4nBeA(G). 


设 多 是 一 个 集 类 , 证 明 : 
(1) m(8) = (多 ) 当 且 仅 当 


4E 名 -> A EmG); ABEe¥—> AUBEem(Y). 
(2) 入 (多 ) = o(8) 当 且 仅 当 


A,BEYR —> AUBEA(G). 


设 名 是 一 个 集 类 , % 和 分 别 表 示 由 多 生成 的 对 可 列 交 和 可 列 并 运算 封闭 的 类 . 若 
下 面 两 个 条 件 之 一 成 立 , 则 m(@) = o(): 

(1) Ae—> Acew; 4 有 E8 一 4UBEmmn( 乡 )， 

(2) AEB—> A EC; ABEeR—> ANMBeEm(G). 


设 多 为 Rn 上 的 一 个 o 代数 ,多 一 {hi1, 42,…} 为 8 的 一 个 可 列 分 割 , 证 明 : 对 任意 
Beao(FUYZ), 存在 Bn EE 多 ,n 之 1, 使 


B= VB, N An). 
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13. 


14. 


15. 


16. 


17. 


18. 


19. 
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(由 设 Re 多 及 如 BEF 一 A-Be, 证 明 多 为 一 个 代数 
(2) 若 REF 及 对 补 和 有 限 不 交 并 运算 封闭 , 证 明 多 不 必 为 一 个 代数 . 


设 {FZ%,n 之 1} 为 上 的 一 串 集 族 , 定义 


ZF= {| Fa{A: AeF, vn>1} 
n=1 


2 = U Fn 全 {4: 存在 n, 使 Ae 2,}. 
n=1 
(1) 车 2;,, n > 1 为 代数 (或 o 代数 ), 则 Zz 也 为 代数 (或 o 代数 ). 


(2) 车 对 任意 n 之 1, 多 为 代数 且 ZC .Zr 则 .办 也 为 代数 . 但 若 多 换 成 o 代 
数 , 则 .和 不 必 为 o 代数 ( 试 举例 说 明 ). 


设 名 为 2 的 任 一 集 类 , f(8) 是 包含 各 的 一 切 代数 之 交 . 
(1) 车 多 具 有 有 限 元 , 则 (8) = o(%). 
(2) 车 多 具有 可 列 元 , 则 f(%) 也 是 可 列 的 . 


设 多 为 具有 如 下 性 质 的 集 类 : 对 任意 4 e 名 , 4 可 表 为 加 中 元 素 的 可 列 并 . 证 明 
o(%) 就 是 包含 多 的 在 可 列 交 和 可 列 并 运算 下 封闭 的 最 小 类 . 





证 明 一 个 o 代数 不 可 能 为 可 列 无 穷 一 一 它 的 势 只 能 为 有 限 或 至 少 为 连续 统 . 
设 zy 为 上 的 一 个 o 代数 . 对 任意 w€ 1, 令 


uy={Bex, weB)}, A(w)= (| 5， 
BE wy 


称 A(w) 为 含有 ww 的 原子 . 证 明 : 


(1) 车 ww En, 则 4(w) = A(w 或 A(w)n A(w) = 由 
(2) 令 多 为 生成 of 的 代数 , 对 任意 由 E 2, 令 


CG, = {BEY, we B}, 
则 4(w) = 门 B. 特别 地 , 当 x 可 分 时 , 每 个 原子 A(w) € xf. 
BEG 
设 x 是 例 1.3.2 中 无 限 集 0 上 的 代数 . 在 wt 上 定义 集 函 P: 


P(A) = 0， 4 有 限 
”| 1， 4 无 限 . 


20. 


21. 


22. 


23. 


24. 
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(1) 证 明 P 上 共有 有 限 可 加 性 . 
(2) 若 8 为 可 列 无 限 , 则 P 不 具有 c 可 加 性 . 


(3) 车 0 为 不 可 列 无 限 , 是 2 上 由 可 列 集 和 可 列 集 余 集 构成 的 o 代数 . 在 多 上 
定义 集 函 P: 
0， 4 是 可 列 集 
PO) -1 1， 4 是 可 列 集 余 集 ， 


证 明 P 具有 c 可 加 性 . 
设 多 o 是 (0,1] 上 有 限 不 交 并 区 间 生 成 的 代数 , 在 Bo 上 定义 集 函 P: 


Pr 人 二 若 存 在 <e> 0, 使 (1/2,1/2 上 +eC 4 
(4)= 0， 否则 . 


证 明 : P 是 加 性 的 , 但 不 是 o 加 性 的 . 
设 (2 多,P) 是 一 个 概率 空间 , Po C 2. 记 0 站 多 二 {0 A:Ae 多 }, 称 之 为 多 在 
fo 上 的 限制 . 车 P(f20) > 0, fo es 多, 则 定义 集 函 


P(B) 


P'(B) 一 P(f0)’ 


BEWNF. 


证 明 fo nn 多 是 f26。 上 的 一 个 og 代数; P' 是 fo mm 多 上 的 一 个 概率 测度 . 三 重 偶 
(420, f20 首 多 ,P') 称 为 概率 空间 (2, 多,P) 在 9o 上 的 限制 . 
(概率 的 上 下 连续 性 ) 


(1) 在 概率 空间 (8, 多 ,P) 中 , 论述 概率 的 上 连续 性 、 下 连续 性 与 概率 在 0 处 的 连续 
性 的 关系 . 


(2) 对 于 一 般 的 oc 有限 测度 v, 试 讨论 以 上 三 者 的 关系 . 
设 P 是 代数 or 上 的 概率 测度 , 事件 4。e wy, m > 1 满足 4= A,e wy 和 且 
n= 二 1 


P(Am An) = 二 0,Ym 关 n. 证明 P(4) = 和 P(A,). 
nn 二 1 


一 个 概率 空间 (0, 多 ,P) 称 为 无 原子 的 , 车 P(A) > 0 蕴涵 存在 BCA 使 0<P(B) < 
P(A4) (当然 4, B e 多 ). 


(1) 在 无 原子 情况 下 , 若 P(4) > 0 及 e> 0, 则 必 存 在 BCA 使 0 <P(B)<e. 
(2) 在 无 原子 情况 下 , 若 0 < x < P(A), 则 必 存 在 BC4 使 P(B) = zx. 
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25. 


26. 


27. 


28. 


29. 


40 


(3) 证 明 : 2 可 作 如 下 分 解 
由 一 4 十 》 4;, 
其 中 第 一 项 与 第 二 项 不 必 同 时 出 现 . 但 车 出 现 , 则 每 个 A; 具有 正 概率 , 而 4 中 
无 原子 . 


设 (02, 多,P) 为 一 个 概率 空间 . 

(1) 证 明 {P(4) : 4e 多 } 是 一 个 闭 集 ; 

(2) 证 明 {P(A4) : 4 € .多 } 或 者 是 有 限 集 或 者 是 一 个 完全 集 . 

设 4 是 [0,1] 中 的 工 可 测 集 , 以 |4| 表示 4 的 LL 测度 , 设 |4|=a€ (0,1), B= [01H-4. 
证 明 : 对 任意 7, 0 < r < co, 存在 区 间 Tc [0,1 使 


IINAI _， 
EnBl 





设 多 是 一 个 代数 , P! 和 P2 是 c( 多 ) 上 的 两 个 概率 测度 , 用 单调 类 定理 证 明 : 若 P; 和 
Pz 在 多 上 是 一 致 的 , 则 在 c( 多 ) 上 也 是 一 致 的 . 


设 (2, 多,P) 是 一 个 概率 空间 , 多 C 多 , 令 


HH={AEF: P(A)=sup{P(B): BEe®G,BC A}}, 
gg={AE€EF: P(A)= inf{P(B): BEe®,,ACB}}. 


证 明 : (1) 久 C6 且 冯 为 单调 类 ; (2) G6 C9 且 9 为 单调 类 . 
( 续 上 题 ) 设 o(8) = 好 , 日 满足 条 件 : 
A,Bew—> AUBE®Y; 4e 多 一 4e( 仿 )。， 
则 对 任意 4e wy, 有 P(A) = sup{P(B):BC A,Be%g}. 
(1) 在 概率 空间 (2, 多 ,P) 中 , 定义 
d(A,B)=P(AAB), YA,Be 2Z. 


在 集合 的 等 价 类 意义 下 , 证 明 d 是 多 的 一 个 距离 . 


(2) 若 (92, 多 ,P) 是 无 原子 概率 空间 , 对 给 定 的 4,B €E 多 及 0 < t < 1, 证明 存 在 
Er: € 多 ， 使 得 


d(A, E) =td(A,B), dl(E:,B)= (1-t)d(4,B). 


(具有 这 种 性 质 的 距离 空间 称 为 凸 的.) 


OOOOOODOOODOOOOOOOOOOOGOD 第 1 章 概率 空间 


31. 设 P 为 多 (0,1) 上 的 概率 测度 , 车 对 (0,1) 区 间 中 任意 工 测 度 入 为 1/2 的 Borel 集 4， 
其 概率 测度 也 为 1/2. 证 明 P 和 入 在 多 (0,1) 上 相 一 致 的 . 
32. 设 P 和 P' 为 可 测 空间 (2, 妈 ) 上 的 两 个 概率 , 多 为 包含 8 且 生 成 o 代数 xv 的 7 系 . 
车 P 和 了 限制 于 名 上 是 一 致 的 ,证明 P 和 P' 在 好 上 也 是 一 致 的 . 
33. 设 {An,n 之 1} 是 独立 的 事件 序列 , 证 明 若 对 每 个 天 1， 
>》 P(4n|48nn45 1) = oo， 
也 之 天 
则 PQim sup 4。) = 1. 若 取 消 独 立 性 条 件 , 则 上 述 级 数 对 任意 有 > 1 发 散 也 蕴涵 
Pllimsup An)= 1. 
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第 2 章 随机 变量 的 积 


2.1 可 测 映射 


设 久 是 从 集合 8 到 82' 中 的 一 个 映射 , 则 存在 一 个 道 映 射 
X-1: BP) » P(N), 
它 满足 如 下 的 关系 式 : 
XI(A)={v: X(w) Ee A}, AePn). 


逆 上 映射 X-! 对 余 运 算 、 交 运算 和 并 运算 (这 里 不 要 求 限于 可 列 交 和 可 列 并 ) 有 如 
下 的 性 质 : 


(Na) -Nx 
1ET iET 

其 中 hi, i eT 为 2' 的 任意 子 集 , 不必 可 数 . 以 下 我 们 用 X-!(W') 表示 当 C' 在 

人 2' 的 子 集 类 多 ' 中 变化 时 所 得 到 的 子 集 类 {X-1(C'), C'E 多 称 其 为 多 ' 的 逆 像 . 

由 X-: 的 上 述 性 质 知 , 车 wyY' 为 2' 上 的 一 个 代数 (或 o 代数 ), 则 X-1(sy') 也 是 

2 上 的 一 个 代数 (或 o 代数 )， 
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引 理 2.1.1 设 ' 为 2' 的 一 个 子 集 类 , 则 由 Z' 生成 的 o 代数 yf' 的 道 像 
XX-1(27') 等 于 由 X-1(W') 生成 的 o 代数 , 即 


Xr-i(o(G)) = 0 (XG)). 
证 记 or =o (X-1(@')). 因 X-i(ox') 是 包含 XX-1(W') 的 o 代数 , 故 
X-1(o(G) 2 wy 

另 一 方面 , 令 

B={B': X 1B)e wy}. 
对 任意 B' e 1 由 于 XX-1(B ) EX-1(@) C ,所 以 Y'C 多 ,下面 证 明 多 为 c 代 
数 . 设 B'E 多 ', 则 XX-1(B') € oy, 从 而 由 XX-! 的 性 质 得 XX-1(B*) = (X-!1(B')): € 
2Y， 即 多 对 余 运 算 封 闭 . 设 Be 多 >1 则 X-IB) € 1, n 之 1, 从 而 
X11( 冲 Bi) = 口 X-1B ez 于 是 口 BieB8, 即 B 对 可 列 并 运算 封闭 . 又 


显然 fe 多 , 故 多 是 包 全 多 ' 的 o 代数 . 负 此 ， 有 De( 多 ) = 好 0 即 和 -IC C . 
综 上 所 述 即 得 引 理 . 


给 定 一 个 8 到 8' 内 的 映射 于 以 及 0 的 o 代数 oy, 则 
of! 一 {A’ : X-1(A’) € 7 } 
是 2 上 的 一 个 o 代数 , 它 称 为 通过 和 由 ox 导出 的 o 代数 .车 P 是 可 测 空间 
(0,9Y) 上 的 一 个 概率 , 则 由 公式 
P'(4) = P(X (A’)) 
在 可 测 空间 (82', wz') 上 定义 了 一 个 概率 P'. 我 们 称 概率 空间 (02', sz',P') 是 通过 久 
由 (8, wz,P) 导出 的 . 


例 2.1.1 从 nn 件 产品 中 随机 抽取 外 件 进行 检验 . 设 这 mn 件 产 品 中 有 mm 件 次 品 ， 
km. 令 wi 表示 第 i 次 抽取 到 的 产品 , 则 试验 空间 为 8 = {w = (wi,… ,wx)}. 
再 令 


Ai = {取出 的 太 件 产品 中 有 i 件 不 合格 品 }， i 二 0,1,.…,h， 


k 
Bi= Ao+Ai, B2= A2+ As+t Ahy, Bs = 》 h;, 
j=5 
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of = o(Bi1, Bo, Bs). 


(9 人 ee 


因此 也 可 算出 B; 发 生 的 概率 , (f, x, 多) 构成 一 个 概率 空间 . 车 X 表示 取出 的 大 
件 产品 中 的 不 合格 件数 , 则 和 是 中 到 8 = {0,1,… ,k} 上 的 一 个 映射. 容易 看 出 
由 X-(B1) = Bi 可 以 得 到 


容易 算出 


Bf ={0,1}, B= {2,3,4}, B,= {5,... ,Ek}. 

令 of' = o(B;, Bs, Bs), 则 由 P'(B') = P(Bi), i = 1,2,3, 确定 了 wx' 上 的 一 个 概率 
P'. 这 是 由 (人 2, x,P) 通过 映射 X 在 (20) 上 导出 的 概率 . < 

定义 2.1.1 给 定 两 个 可 测 空间 (2 24) 和 (f22,222), 闫 为 9 到 022 中 的 映射 
车 -1(g6) C oh, 则 称 X 为 可 测 的 , 记 为 Xe hi/2%. 著 (人 2, 2) = 梧 , 砚 虽 )， 
则 简 记 为 Xe oh, 并 称 X 为 到” 上 的 Borel 可 测 函数 , 或 简称 可 测 函 数 . 

由 定义 , X 可 测 是 指 gh 经 XX 导出 的 8。 上 的 子 集 o 代数 比 op 更 精细 . 由 引 
理 2.1.1, 我 们 有 

定理 2.1.1 设 (f2,.%4), i = 1,2, 为 可 测 空 间 , 关 为 由 到 fo 中 的 映射 车 
2 二 0( 名 ), 则 XE 4 /6 的 充 要 条 件 是 X-LG) C oA. 

证 必要 性 显然 , 仅 证 充分 性 . 设 基 -1(8) C 4, 注意 到 6 = ol 多) 及 oh 为 
o 代数 , 由 引 理 2.1.1 得 XX-1(g6) = (XI( 名 )) C94. | 

例 2.1.2 设 儿 ={( -oozl zeR}, 则 多 为 了 玉 上 的 r 系 ,因此 映射 X: 
(1, 4) 一 ( 展 , 多 ) 可 测 的 充 要 条 件 是 X-I((-oo,z]j) € 好 对 一 切 x ER 民 成 立 . 当然 ， 
上 述 多 中 的 半 开 半 闭 区 间 (一 oo0,z] 可 改 为 (一 00, 7z), (x, 00), [z,ooj, [a,b) 等 形式 .4 

例 2.1.3 设 (1, x,P) 为 概率 空间 , 多 为 尺 上 的 Borel 域 . 设 A e sy, 定义 映射 


则 I4 是 (2, xyY) 到 ( 民 ,多 ) 中 的 一 个 可 测 映 射 , 称 为 集合 4 的 示 性 函数 . 由 I4 在 
了 及 上 导出 一 个 o 代数 8 = 儿 (R), 容易 验证 


I21(%) = 切 4,4c 0 = (4). 
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在 (RR, 多 ') 上 定义 集 函 P' 如 下 : 设 4 e 8 


0， 著 0& A 且 1¢ 4 
Pp'(A') = P(A), 车 1e A 但 0¢ 4 
1 一 P(4)， 车 0e 4 但 1¢4 
1, 车 0e 4 且 1€ 有 4， 
则 P' 是 P 经 174 在 (BR, 有 ) 上 导出 的 概率 . 4 


设 X; 是 可 测 空间 (2, oz) 到 可 测 空间 (02;, 7) 中 的 一 个 可 测 映射 , 其 中 i eT. 
车 令 
o(Xi,i€E TESo{Xr (ob ie 站 
(注意 这 里 不必 可 数 ), 则 o(Xi,i Ee 了) 是 oxy 中 使 得 对 一 切 ie 7 都 有 Xi€ 424/24 
的 最 小 子 o 代数 . 


2.2 随机 变量 


为 避免 重复 , 以 下 我 们 总 假定 (2, x ,P) 是 给 定 的 概率 空间 , 多 (或 多 ) 是 到 (或 
恨 ) 上 的 Borel 域 . 

关于 随机 变量 , 首先 我 们 定义 阶梯 随机 变量 , 然后 引入 一 般 实 随 机 变量 的 概念 . 
阶梯 随机 变量 在 概率 论 研究 中 占有 很 重要 的 地 位 , 随机 变量 许多 性 质 的 研究 都 是 
通过 用 阶梯 随机 变量 逼近 的 方法 来 研究 的 . 由 于 随机 变量 可 以 分 解 为 正 部 和 人 负 部 
之 差 , 所 以 通常 命题 的 证 明 方 法 为 : 第 一 步 , 性 质 P 对 非 负 阶 梯 随 机 变量 成 立 ; 第 
二 步 , 性 质 P 对 非 负 随机 变量 成 立 ; 第 三 步 , 性 质 P 对 实 随 机 变量 成 立 . 一 个 复 值 
随机 变量 定义 为 2 = 和 二 这 ,其 中 X 和 Y 为 实 随 机 变量 , i? = -1. 本 质 上 , 复 随 
机 变量 是 一 个 二 维 随机 向 量 , 今后 将 作 进一步 的 讨论 . 下 面 先 定义 阶梯 随机 变量 . 

定义 2.2.1 设 {4i,iE 7 为 8 的 一 个 有 限 分 制 , 且 Ai€E oY,ieET, 针 为 2 到 
实 直线 及 的 一 个 映射 , 若 在 每 个 A; 上 X 取 常 值 , 即 


X(W) = Ti VweAi, iEel, 
则 称 X 是 阶梯 随机 变量 . 
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命题 2.2.1 X 为 阶梯 随机 变量 的 充 要 条 件 是 XX-!1( 多 ) 是 一 个 有 限 子 o 代数 . 

证 充分 性 设 久 -1( 留 ) 为 wy 的 有 限 子 o 代数 , 由 命题 1.2.1 知 XX-!( 多 ) 由 其 
有 限 原子 集 {4;,i e 刀 生成 , 其 中 和 = 二 .由 于 4; 为 原子 , 故 对 一 切 w € 4i， 

X(w) 取 相 同 的 值 , 而 对 不 同 的 4;， x 取 不 同 的 值 , 故 X 为 阶梯 随机 变量 . 

必要 性 设 X 为 阶梯 随机 变量 , 由 定义 2.2.1 中 表达 式 给 出 , 易 证 X-!( 名 ) 等 
价 于 由 {4hi,ieE Ti 生成 的 o 代数 . L 

设 表示 (0,.xY,P) 上 全 体 阶梯 随机 变量 所 构成 的 集合 , 则 由 阶梯 随机 变量 的 
定义 , 容易 验证 8 有 如 下 性 质 : 

(1) 8 是 一 个 线性 空间 ; 

(2 ea 则 XY < @; 

(3) 若 X,Y e 8, 则 


sup{ X,Y} 人 XVvVYeEel, inf{X,Y}EeXAYee. 


特别 地 ， 一 个 集合 4 < .of 的 示 性 函数 Ia 是 阶梯 随机 变量 . 当 4 = f 时, 简 记 
To =] 即 处 处 为 1 的 阶梯 随机 变量 . 显然 , 由 示 性 函数 J4 和 A 的 对 应 关系 可 得 
示 性 函数 有 如 下 性 质 : 


(1) Ia: =1 一 TVYA4E 好 i 

(2) Ia < IB 当 且 仅 当 A CB, 其 中 A,Be zy; 
(3) I4uB 二 14 十 1B 一 TanB; 其 中 A,Be wy; 
(4) 对 任意 下 标 集合 1, 有 


nier4i = inf 14., Tuier4 = Sup Ta. (2.2.1) 
YE i€I 
特别 地 , 我 们 有 


Dim sup An 一 lim sup Ta,, Tim inf 4。 = lim inf La,. 


定义 2.2.2 设 和 是 (02, 好 ) 到 (RR, 多 ) 中 的 映射 ,车 存在 阶梯 随机 变量 序列 X,,， 
使 对 每 个 we 1, 都 有 Xi,(w) 一 Xu) (n 一 o0), 即 是 一 列 阶梯 随机 变量 的 逐 
点 极限 , 则 称 X 是 (8, x,P) 上 的 一 个 随机 变量 . 若 X(2) C R, 则 称 藉 为 非 负 
随机 变量 . 
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注 为 了 今后 方便 起 见 , 可 以 把 随机 变量 的 定义 稍稍 修改 为 : 若 半 是 (2, 光 ) 到 
( 民 , 多 ) 中 的 映射 , 它 是 一 列 阶 梯 随 机 变量 的 逐 点 极限 , 记 刀 = {w: |X(w)| = +ecol. 
车 P(D) = 0, 则 称 X 是 (2,oy,P) 上 的 一 个 随机 变量 . 由 于 


D= (){w: IX(w)| > n), 


故 D € 好. 这样 的 修改 使 XX 可 以 在 一 个 零 概 集 上 取 值 oo, 称 其 为 几乎 处 处 有 限 
(或 a.s. 收敛 ). 当 我 们 涉及 可 列 运算 时 , 这 种 修改 不 会 影响 对 随机 变量 性 质 的 讨论 . 

类 似 于 命题 2.2.1, 对 随机 变量 X 我 们 有 如 下 的 结果 . 

定理 2.2.1 X 为 (1,.xY,P) 上 随机 变量 的 充 要 条 件 是 X-1( 儿 ) C 2. 

证 必要 性 设 X 为 随机 变量 , {Xnm > 1} 为 一 列 阶梯 随机 变量 , 使 对 每 个 
wEn 有 XW) 一 天 (四 ) (一 co). 由 于 多 = focozzeR 生成 及 上 的 ec 代 
数 名, 而 

{w: X(w) < zx} = 站 lim inf fe: Xn(W) < T+ i € .c， 
k=1 
故 X 关于 sz 可 测 . 
充分 性 设 和 是 (02) 到 ( 展 , 多 ) 中 的 可 测 映射 , 令 


Xt ~ max{X,0}, X = max{—X,0}, 


分 别称 其 为 X 的 正 部 和 负 部 , 则 X = X+ 一 XX-.， 故 只 要 证 明 对 每 个 (2, oz) 到 
(RR, 多 ) 中 的 非 负 可 测 函 数 是 一 列 阶梯 随机 变量 的 逐 点 极限 即 可 . 但 对 任 一 非 负 可 
测 函数 了 , 令 


72m . 


i—1 
Yn = 2 on Ti-1)/2" <Y <i/2"} 十 nl{y>n}, 


i 二 1 
则 到 人 县 了 于 入 YY. 因为 了 关于 好 可 测 , 故 ,为 阶梯 随机 变量 . 另 一 方面 , 当 
n 一 co 时 , 对 每 个 we 1, 显然 有 YY(w) = lim Yi(w). 和 
在 定理 2.2.1 充分 性 的 证 明 中 , 我 们 实际 上 证 明了 如 下 的 结论 . 


定理 2.2.2 定义 在 (4, x,P) 上 的 每 个 非 负 随机 变量 至 少 是 一 列 非 降 、 非 负 
阶梯 随机 变量 的 极限 , 且 这 个 序列 可 以 满足 如 下 条 件 : 对 在 12 的 每 个 子 集 上 有 上 
界 的 非 负 随机 变量 而 言 , 收敛 是 一 致 的 . 
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下 面 研究 随机 变量 的 性 质 ， 由 于 随机 变量 与 可 测 函 数 的 差别 仅 在 于 是 否 可 取 
值 oo. 故 下 面 的 讨论 针对 可 测 函 数 进 行 , 而 把 随机 变量 作为 特例 , 读者 容易 发 现 随 
机 变量 在 经 过 一 系列 运算 后 仍 是 随机 变量 . 

首先 容易 看 出 可 测 函 数 对 算术 运算 是 封闭 的 , 只 要 这 些 运算 不 产生 不 确定 的 
表达 式 , 例如 co -~ co, 0.co, 革 , 8 等 等 . 更 确切 地 说 , 若 X 和 了 是 可 测 函 数 , 则 cX 
(c 为 常数 ), 和 二 并, XY 等 仍 是 可 测 函 数 ; 第 二 , 可 测 函 数 对 上 (下 ) 确 界 运算 及 极 
限 运算 封闭 , 这 是 因为 : 若 Xi, € 好,m > 1, 则 


人 sup Xulw) sz = 门 fw: Xn(w) < rz}e 2, 


n 二 1 


fo: 半 和 < 中 =-Ute Xn(uw) < zj Em. 


车 Xn 4, 则 

人 :im Xnlw ) <z} = Ue Xn(wW) < 车 Et; 
车 XX, 7, 则 | 

{w: lm Xn(w) <4}= Nw: Xs(w) < rt} Em. 
由 于 


lim sup Xn = lim (sup x:) ， 
了 一 Oo 


兄 一 Oo k>n 


lim inf Xn = 一 im (如 把) ， 
kn 


所 以 limsup Xn 和 lim inf X 都 是 可 测 函数 . 若 令 4 为 使 Xu(w) 收敛 的 8 的 子 集 ， 
也 即 
A= (2 lim sup X,, (w) = liminf Xn(w 中 


了 一 CO 


则 4 为 可 测 集 . 当 4 = 8 时 , 称 {Xn,n > 1} 处 处 收 伊 , 其 极限 函数 记 为 lim Xn， 
它 是 一 个 可 测 函 数 . 


下 面 我 们 来 研究 可 测 函 数 的 复合 函数 是 否 仍 为 可 测 函 数 . 为 此 , 需要 如 下 的 
引 理 . 
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引 理 2.2.1 设 (f2;, 0), i = 1,2,3, 是 三 个 可 测 室 间 , Xe 204/ 90, € 528/598， 
则 由 
Z(w)= (foX)(w) = F(X(wi)) 
定义 的 复合 映射 = fo 六 € o4/ 2%. 


证 显然 Z 是 21 到 {23 中 的 映射 . 由 逆 映 射 性 质 ， 对 任意 B € 0， 有 


(foX) (B)= {wi: {(X(w1)) € B} 
= {wi: X(w) ef (B)} = X (fF7(B)). 


由 引 理 条 件 f € 42 /948, Xe 41/962 知 1-1(B)€ 94 以 及 X11(f-1(B))&e 4, 即 
Z € fs. 有 


在 上 述 引 理 中 , 取 上 和 和 为 到 上 的 Borel 可 测 函 数 , 则 了 (XX) 仍 为 Borel 可 测 
函数 . 特别 地 , 由 于 连续 函数 为 Borel 可 测 , 故 若 f 为 RR 上 的 连续 函数 , X 为 随机 
变量 , 则 f(X) 仍 为 随机 变量 . 

定义 2.2.3 (1) 设 X,Y 为 (sr,P) 上 的 两 个 随机 变量 , ;= V1, 称 2 = 和 + 这 
是 (2, ,P) 上 的 一 个 复 值 随机 变量 . 

(2) 设 XI ,Xn 为 (1,9,P) 上 的 nn 个 实 ( 复 ) 随机 变量 , 称 (Xi1,… ,Xn) 为 
(12, 7,P) 上 的 一 个 n 维 实 ( 复 ) 随机 向 量 , 其 中 Xi 称 为 它 的 第 大 个 分 量 , 1 <k < nn. 


由 定义 知 一 个 n 维 实 随机 向 量 是 (0, ez) 到 (R”, 多 (中) 中 的 一 个 可 测 映 射 , 而 
复 随 机 变量 是 在 复 平面 上 取 值 , 即 在 及 2 上 取 值 . 因此 复 随机 变量 2 仍 是 实 随机 向 
量 (X,Y) 的 一 种 表现 . 关于 随机 变量 (一 维 可 测 函 数 ) 的 上 述 性 质 可 以 原封 不 动 地 
搬 到 ” 维 随机 向 量 (n 维 可 测 函数 ) 上 . 例如 , 在 引 理 2.2.1 中 , 取 基 为 n 维 随机 向 
量 , f 为 了 "一 了 m 的 连续 函数 , 则 f( 针 ) 是 一 个 m 维 的 随机 向 量 . 

例 2.2.1 设 X 为 随机 变量 , 则 eiX 是 一 个 以 1 为 界 的 复 随 机 变量 , 这 是 因为 
eiX 的 模 ||eiX|| = 1 eiX = cosX +isinXX. 4 

在 第 1 章 , 我 们 给 出 了 集合 形式 的 单调 类 定理 , 它 在 证 明 1 的 一 个 子 集 族 是 o 
代数 时 起 了 重要 作用 . 与 此 相对 应 , 我 们 将 给 出 函数 形式 的 单调 类 定理 , 它 是 证 明 
某 个 函数 类 有 某 种 性 质 的 一 个 有 力 工具 . 

定义 2.2.4 设 终 是 定义 在 2 上 的 一 族 函 数 , 满足 条 件 : 若 fe .2, 则 上方 , 广 < 
2 乡 . 如 果 函 数 族 和 满足 如 下 条 件 : 

(a) 1 € .和 (1 表示 恒 等 于 1 的 函数 ); 
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(b) . 阁 中 有 限 个 函数 的 线性 组 合 (如 果 有 意义 ) 仍 属 于 . 阁 ; 

(c) 车 fe€ ,0< fn1f,f 了 有 界 或 fe 名, 则 fe 交 . 
则 称 函 数 族 .因为 .名 类. 

定理 2.2.3( 函 数 形式 的 单调 类 定理 ) 设 . 和 是 Q 上 的 一 个 -22 类 ,和 为 如 上 
的 垃 系 . 若 . 阁 包 含 .4 中 任 一 集合 4 的 示 性 函数 I4, 则 知 包含 了 一 切 属 于 .2 且 
关于 o(.8) 可 测 的 实 值 函数 . 

证 证 明 思 路 是 用 示 性 函数 来 建立 函数 类 .次 对 应 的 集合 类 , 再 用 集合 形式 的 
单调 类 定理 返回 到 函数 族 . 

设 

B={A: Ia€ HN,ACn)}. 
由 于 当 Ae .8 时 , 14 € ,所 以 4 C 9. 注意 到 .4 是 7 系 , 由 集合 形式 的 单调 类 
定理 知 , 若 能 证 明 今 是 一 个 入 系 , 则 乡 2 A(.8)==o(.8). 下 证 B 是 入 系 . 

由 定义 2.2.4 中 条 件 (a) 知 2 € 多 . 车 A41, 42 € 9, 且 A1 C Az, 由 定义 2.2.4 
中 条 件 (b), Ta 4 = Ts 一 Ta € 6, 即 Ao 一 Al EF. 最 后 , 若 A, 1+ A, An,€ 9， 
由 示 性 函数 性 质 (2.2.1) 知 [4 = lim 1 14,, 而 定义 2.2.4 中 条 件 (c) 蕴涵 Ta e .%， 
即 4e 2. 因此 , 9 是 一 个 入 系 . 

对 任意 实 值 函数 Je 纪 且 feo(8), 则 f=f+ 一 f-, 有 f+,f-e. 儿 是非 负 
ol(.Z) 可 测 的 . 因此 , 如 果 我 们 能 证 明 当 f > 0 时 , f & .和 p, 则 本 定理 成 立 . 为 此 , 设 
J>0jfez 且 jsc(Z). 由 定理 2.2.2, 存在 非 负 阶梯 随机 变量 序列 {f,n 1)， 
使 f 7, 其 中 


kr 
fn = YanilAns Ani € 0(.7), i= 1,.… ,hn. 


2=1 


由 wp 是 线性 空间 及 o(.8g) C 9 知 阶梯 随机 变量 户 < 和. 再 由 定义 2.2.4 中 条 件 
(c) 得 f € . 冯 . 定理 证 毕 . 有 


下 面 我 们 用 定理 2.2.3 来 证 明 几 个 重要 结果 . 由 定义 2.1.1, (人 , 7,P) 上 的 可 测 
函数 了 关于 .x 的 子 c 代数 4 可 测 是 指 c(Y) C 4, 其 中 


of( ZJ) 全 {7Y-I(9): Se %}. 


一 种 特殊 情况 是 吗 由 一 个 可 测 函 数 X 生成 的 , 即 吗 = o(X). 下 面 的 定理 刻画 了 
关于 o(X) 可 测 的 可 测 函 数 的 特征 . 
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定理 2.2.4 设 X 和 了 是 (2,oy) 中 的 两 个 可 测 函 数 , 则 Y es c(X) 的 充 要 条 
件 是 Y= 了 (X), 其 中 fe 史 , 并 且 若 了 为 随机 变量 (有 界 ), 则 可 取 f 也 是 有 限 (有 
界 ) 的 . 

证 充分 性 车 Y= 了 (X), fe 喝 , 则 由 引 理 2.2.1 得 Y € o(X). 

必要 性 令 儿 为 x 可 测 的 函数 全 体 ， 


HH={foX: f eH}. (2.2.2) 


我 们 来 逐条 验证 .和 满足 定理 2.2.3 中 的 条 件 . 
(1) 因为 1=1E0oX, 1 学 ,所 以 1e . 知 . 
(2) 6 是 线性 空间 . 对 任意 责 , 歼 & . 知 , 则 存在 户 , 户 e 多 ,使 得 阅 = 户 oX， 


到 = 户 oX. 设 a,8 为 任意 两 个 实数 , 则 af1,8fs& 名. 如 果 ac 六 + 92 有 意义 ( 即 
不 出 现 Ooe 一 oo)， 则 afi+t+ bf2 Ee 多 故 


aYi+BY2 = (afijoX+(Bfo)oX= (afi+Bfa)oX € HX. 


(3) 设 YY, € .和 %， n 宛 1,HOgY,tY, 则 存在 fn € 多 , 使 得 ,= foX,n>1. 
令 f=supfn, 则 fe 多 且 Y= /foX, 因 此 Ye. 
刀 之 1 


(4) 对 任意 A e o(X), 则 存在 Be 宛 使 得 4=X-I(B). 由 于 weA 当 且 仅 
当 X(o) E B, 所 以 14(w) = TB( 关 (w)) 对 一 切 妈 E 8 成 立 , 即 14 = IBoX. 显然 
IBp EE 多 , 故 I4€ 办. 

由 上 知 .办 满足 定理 2.2.3 中 的 所 有 条 件 , 故 .和 包含 了 一 切 oc(X) 可 测 的 函 
数 . 由 于 Ye o(X), 故 了 e . 知 . 因此 存在 fe 名 ,使 Y = foXX. 如 果 Y 有 限 或 有 
界 , 只 要 在 式 (2.2.2) 中 分 别 把 Je 久 改 为 je 多 或 fe[-M,M], 其 中 作为 f 的 
界 , 以 上 讨论 逐 字 逐 句 仍 成 立 . L 

注 1 可 以 把 定理 中 X 推广 为 (8, wz) 到 (已 ,G@) 中 的 可 测 映射 ,Y 仍 为 人 上 的 
可 测 函 数 , 则 Ye o(X) = 六 -1(@) 的 充 要 条 件 是 存在 f € 8, 使 Y= f(X). 证 明 方 
法 完全 相同 , 这 种 推广 是 有 意义 的 . 例如 , (EB,@) = (R", 多 (中) 就 是 最 常见 的 一 种 . 

注 2 定理 2.2.4 中 必要 性 的 证 明 只 是 证 明了 f 的 存在 性 . 事实 上 , 可 以 用 阶梯 
随机 变量 逼近 可 测 函 数 的 方法 把 构造 出 来 . 

定理 2.2.5 设 .2 是 定义 在 及 上 的 实 函 数 类 , . 知 是 玉 上 包含 有 界 连续 函数 
的 .2 类, 则 . 色 包含 .名 中 一 切 Borel 可 测 函 数 . 
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证 令 

C= {(a,5) : a,b eR")}, 
车 a,b 中 有 分 量 为 -oo 或 +o0 时 , 则 把 那个 分 量 所 在 区 间 含 有 土 oo 的 那 头 改 成 
闭 的 ， 显 然 , 多 为 fr 系 , 且 静 加 0) =- so(%)， 由 定理 2.2.3, 我 们 只 要 证 明 多 中 长 方 
体 的 示 性 函数 属于 .办 即 可 . 任意 选取 多 中 的 长 方 体 4 = (a,5b). 为 简单 起 见 , 我 
们 先 考虑 a,b e R" 情形 . 此 时 , 4 可 表示 为 4 = (al,0) x … x (an,bn). 对 任意 
ke fn 和 1eN, 定义 函数 


0， Tk ak 
[Tk —ak), Qk <Tk art 1/l 
fiV (rg) = $4 1, ag + 1/l < zi & bg— 1/l 
l(bxp— Zr), bgp—1/l< Zr < bk 
0， Tk 之 bk, 


则 J(O(zw) 看 做 页 ”上 的 函数 是 连续 有 界 的 , 且 当 1 一 oo 时 ， 
0 和 fA (zn) 1 Tarsbn) (Tk), k=1,.…,n. 


因此 ，]T f(zk) 1 I4(z1… ;zn), 故 由 , 关 的 名 类 性 质 知 FA e 6. 
k=1 

车 4 是 名 中 某 些 分 量 为 无 限 区 间 的 集合 ,例如 4 = |[-o00,b1] x (a2,00) xx 
(an;,bn), 则 用 上 述 方法 同样 可 证 Fa e . 知 . 定理 证 毕 . 

定理 2.2.5 说 明 一 个 Borel 可 测 函 数 可 以 用 有 界 连 续 函 数 来 逼近 . 

由 上 可 知 , 用 函数 形式 的 单调 类 定理 来 证 明 某 函数 族 多 具有 性 质 ho, 其 常用 
手法 是 先 引 入 一 个 函数 族 2 (2 满足 定义 2.2.4 中 的 要 求 ) 及 构造 函数 族 

3 ={f: Je 纤 且 f 了 具有 性 质 Ao}， 


使 得 . 知 为 . 乡 类 . 再 引入 8 中 的 一 个 系 8, 使 .名 中 关于 oco(.84) 可 测 的 函数 类 
包含 多 . 根据 定理 2.2.3, 只 要 证 明 对 一 切 A e .8, Ta4 € .和 即 可 . 这 个 方法 称 为 纪 
类 方法 . 
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2.3 随机 变量 的 分 布 和 独立 性 


2.3.1 分 布 与 分 布 函数 


随机 变量 是 概率 空间 上 取 有 限 值 的 可 测 函 数 . 由 2.1 节 知 随机 变量 X 在 (R, 多 ) 
上 导出 一 个 概率 P' 由 1.5 节 , P' 与 分 布 函数 是 一 一 对 应 的 , 我 们 称 此 分 布 函数 为 
随机 变量 X 的 分 布 函数 . 确切 地 , 我 们 有 


定义 2.3.1 (1) 对 任意 Be 多, 由 公式 


在 (了 ,多 ) 上 导出 的 概率 称 为 随机 变量 X 的 概率 分 布 , 称 
F(z)=P({w: X(w) < x}) 

为 随机 变量 X 的 分 布 函数 . 

(2) 设 入 = (Xi,… ,Xn) 为 有 R”* 中 的 一 个 随机 向 量 , 称 由 公式 

P'(B) = P(X- 1(B)), Be 2™, 
在 (R", 多 (O)) 上 导出 的 概率 为 随机 向 量 X 的 概率 分 布 , 称 
Fr Tn) = P{W: XW) < T1, , Xn) & Ln}) 

为 随机 向 量 六 的 分 布 函数 或 称 为 Xi ,Xn 的 联合 分 布 函数 . 

有 时 , 为 了 表明 FF 是 随机 向 量 (Xi … ,和 ) 的 分 布 函数 , 也 记 下 (x1,:… ,zn) 为 


了 XXX (Z1 , Tn). 

(X1,.… ,Xn) 的 联合 分 布 完全 反映 了 这 n 个 随机 变量 取 值 的 概率 规律 , 特别 
也 反映 了 其 中 任意 (k < n) 个 随机 变量 的 取 值 规律 . 例如 , 设 {21,:… ,ip} CC 
{1,… , 芽 , 不 失 一 般 性 , 设 1<H< 记 <…< 认 < 坟 则 


Px,, 和 (Ti 2 Tix ) 
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=P({w: Xi & xu,l <j <k}) 
=P({w: Xi < zil gign, 其 中 zj) = +o0,vV jg {i ,tr}}) 
三 下 (十 oo，… ,十 oo Zi 十 co ,+00, Tii ;+00,. ,+00). 
称 Fx …,x 为 联合 分 布 Fx,,… ,x, 的 边缘 分 布 . 一 般 个 随机 变量 的 联合 分 布 有 
2" -2 个 不 同 的 边缘 分 布 . 
一 般 而 言 , 当 随 机 变量 X 只 取 可 数 个 值 时 , 采用 X 的 概率 分 布 较为 方便 . 
设 (Xi1,… ,Xn) 的 分 布 沙 数 为 下, 如 果 存 在 可 测 函 数 f(z1,-…… ,zn) 满足 


f(z1,... ,Tn) > 0, V (ZI1，…… ,Tn) E R", 
以 及 
F(z1,.. ,Zn) = | | FT dd (2.3.1) 


则 称 (Xi1,.… , Xn) 为 连续 型 的 随机 向 量 ，f(z1,… ,zn) 为 其 概率 密度 函数 .由 式 
(2.3.1) 知 


全 (za yznjdzl dzn = 1. (2.3.2) 


后 面 将 继续 讨论 分 布 函数 的 分 解 问题 . 
2.3.2 随机 变量 的 独立 性 


设 {Xi,i ET} 是 (8, of,P) 上 的 一 族 随机 变量 , 7 为 任 一 下 标 集 合 . 

定义 2.3.2 随机 变量 族 {Xi;,i e 1} 称 为 独立 的 , 车 由 {Xi;,i e T} 生成 的 ox 
的 子 o 代数 族 {o(Xi;),i € 刀 是 独立 的 ， 如 果 {714,,i e 刀 是 独立 的 , 则 称 事件 
{4i,i EI} 是 独立 的 . 


令 
入 一 {Xi (一 oo zi]) : Ti ER ieEel, 


则 { 弘 ,i € 了 是 一 族 r 系 . 由 关于 独立 性 判别 准则 的 定理 1.6.1 知 , 一 族 随机 变量 
{Xi,iE 7T} 独立 等 价 于 对 了 的 任 一 有 限 子 集 J， 


P (Ne < 可 = [PC <z), VereR,jery. (2.3.3) 
jEJ JE 了 7 
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设 J = {1,2,…… ,有 }, 由 分 布 函数 的 定义 , 式 (2.3.3) 等 价 于 
大 
Pi,... ,xX (T1, 机 ,Tk) 一 [| Fx, (2;). 
j=1 


类 似 地 , 事件 族 {4;,i e 1} 独立 等 价 于 对 了 的 任 一 有 限 子 集 J, 有 


P 0 4] = |[P(4;). 
jEJ jEJ 

由 关于 随机 变量 独立 性 的 定义 可 推 知 , 车 随机 变量 X 与 Y 独立 , f 是 一 个 
Borel 可 测 函 数 , 则 随机 变量 X 与 随机 变量 f(Y) 独立 , 这 是 因为 X 与 了 独立 蕴 
涵 c(X) 和 oco(Y) 独立 , 而 o(f(Y)) Co(Y), 故 久 与 f(Y) 独立 . 这 一 事实 可 以 推广 
到 随机 变量 序列 . 这 里 不 再 著述 

例 2.3.1 设 {Xi;,i Ee I,j & J} 是 一 族 独立 的 m 维 随机 向 量 族 , 7 和 J 为 可 数 
的 下 标 集 合 , 设 多 = o(Xij,7 € J), 则 {多 ,i eT} 相互 独立 . 

事实 上 , 设 


4 {Ne mm): He €E BV REKC, 5 有 要 | 
KE 天 
则 馈 是 生成 多 的 系 , 而 易 见 { 馈 ,ie 刀 是 相互 独立 的 , 故 由 定理 1.6.1 知 
例 2.3.2 设 {Xn,n 之 1} 为 一 列 随机 变量 , 如 果 对 每 个 n 之 1, ao(Xi,… ,Xn) 与 
0(Xn41) 独立 , 则 {Xn,n 之 1} 相互 独立 . 
证 任 取 自然 数 nl < nz <… < nk; 由 于 (Xp ,Xn 1) 与 o(Xn) 独立 , 故 
Xi 与 和 独立, 从 而 XX ，… ,Xn 与 立 ,, 独立 . 同 理 , X,,,… ,XX 


与 X,。， 独立 ; .….…; 最 后 推 得 X,,, XX,,,.… ,X,。 相互 独立 . 由 于 大 是 任意 的 , 由 独 
立 性 定义 即 知 ,{X nm > 1} 是 独立 随机 变量 序列 . 2 


2.4 随机 变量 的 数学 期 望 


在 这 一 节 里 , 我 们 研究 随机 变量 的 积分 , 先 从 阶梯 随机 变量 开始 , 再 到 非 负 随 
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机 变量 , 最 后 到 一 般 随 机 变量 . 整个 路 线 过 程 中 涉及 积分 的 三 大 定理 : 单调 收敛 定 
理 、Fatou-Lebesgue 引 理 、 控 制 收敛 定理 . 


定义 2.4.1 设 和 是 (2,oz,P) 上 的 阶梯 随机 变量 , 有 如 下 表示 


六 二 ya 
i—1 
则 X 的 数学 期 望 (也 称 X 的 期 望 或 积分 ) EX 定义 为 


EX 也 可 记 为 【X(w)P(dw), 简 记 为 | XaP 或 |X. 
以 上 EX 的 定义 是 合理 的 . 事实 上 , 若 X 有 另 一 表达 式 


?4 
X= yls, 
j=1 


其 中 {Bj,1 < j 了 < mj} 为 8 的 一 个 分 割 . 利用 4 = 吴 44Bj, Bj; = 六 A4B; 以 及 
7=1 2 一 工 
当 P(4iB;) > 0 时 , zi = yj, 我 们 有 


DaiP(A) = > xP(hiB;) = > 》 WP(4iBi)= 2 ,YP(B;), 


i=1 I=1 i=1 j=1 
即 由 式 (2.4.1) 定义 的 值 是 一 致 的 . 此 外 , 式 (2.4.1) 显然 等 价 于 
EX = 》、ziP(X = £1), 
其 中 ”是 对 不 同 的 x; 求 和 . 


为 了 合理 地 给 出 非 负 随机 变量 期 望 的 定义 , 我 们 有 必要 先 研 究 阶梯 随机 变量 
数学 期 望 的 性 质 . 


命题 2.4.1 设 8 是 定义 在 (1, ox,P) 上 阶梯 随机 变量 全 体 组 成 的 向 量 空间 . 
(1) 定义 在 8 上 的 期 望 E[:] 是 满足 


ElIsa] =P(A), vAew 
的 唯一 正 线性 泛 函 ; 
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(2) 若 XnTX( 或 XXX) XXXEGC 则 EL 1 EX (或 E[Xn] | EX); 
(3) 反之 , 设 已 是 如 上 的 正 线性 泛 函 , 满足 E[1] = 1 及 当 X 4 0, Xn ee 时， 
有 E[X。]| 10. 车 定义 
P(A)= ElIa], vAe.w, (2.4.2) 
则 巨 就 是 (8,.z,P) 上 阶梯 随机 变量 的 期 望 
证 (1) 由 期 望 下 的 定义 知 : 
1° ElI4| =P(A),vAew: 
2" 若 和 >0Xee 则 EX>0i 
3° 对 任意 cE R, XX & 8@, 有 ElcX) = cEX; 
4° 车 X,Y e 8, 则 
EI[X+Y]=EX+EY. (2.4.3) 
式 (2.4.3) 推导 如 下 : 设 关 = Bria Y= E yi1B;; 其 中 了 和 J 为 有 限 的 下 标 集 
合 , {Ai,iE€ T} 和 {Bj,j € J} 分 别 为 1 的 有 限 分 割 则 


EI[X+Y]= e DE ron 


iEIT jE€EJ 
= 》 > (c+y)P(A:B;) 
i€ET jEJ 
一 DE 》， P(AiB;) 十 >》, Yj bp P(AiB;) 
i€T jeJ JEJ ielI 
= DziP(Ai) + 》 ypP(B;) = EX+EY. 
ZE 了 jE€EJ 


由 1° ~ 4° 即 知 是 8 上 的 正 线性 泛 函 , 由 1° 知 其 唯一 性 成 立 . 


(2) 首先 注意 到 忆 的 加 性 可 推出 正 性 与 单调 性 等 价 . 事实 上 ,着 多 <Y, X,Y < 
8, 则 由 Y 一 基 >0 得 
EY = EX +E[lY — X] > EX. 


设 X 1 Xn € 6, 人 (由 于 Xi 为 非 负 阶梯 随机 变量 , 故 c>0 且 


0 < Xn, < cl{ x >e} 十 6. 
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从 而 
0 < ElX,| < cP(Xn > 6e) +e. 


但 {X% > ce} J 外 利用 概率 在 1 处 的 连续 性 知 lim E[Xn] = 0. 车 X。| XX， 
Xi,XEEB, 则 Xi 一 和 10 且 Xn 一 铸 E@, 故 
E[Xn] = EX + ELX, — X] | EX. 
其 他 情况 可 类 似 证 明 . 
(3) 设 马 是 8 上 的 正 线性 泛 函 , 满足 EI = 1 及 当 Xi, | 0 Xn € 8@ 时 ,有 
E[X4] 4 0. 往 证 卫 是 期 望 . 任 取 X ee , 设 和 = > wila,, 由 BB 的 线性 性 知 
?一 ] 


EX = 》 ziE[TAi]. 
i=1 
因此 只 要 证 由 式 (2.4.2) 所 定义 的 P 是 上 的 概率 即 可 . 由 于 EE 是 8 上 的 正 线性 
泛 函 , E[1] = 1, 故 P(f) = 1, 且 对 任意 4 e cy， 
1= Ella + = E[lA] + ElIa:| > ElI4| = P(A)>0. 
设 ANMB=64,B ey, 则 
P(A+B)=E[lla48] = Ella +1s]= P(A)+P(B), 

即 P 满足 有 限 可 加 性 . 最 后 , 若 A， | 0, An € 好 ， 则 7 1 0, PE 8, 于 是 
P(4) = El14,] 140, 即 P 在 0 处 连续 . 因此 ,P 为.w 上 的 一 个 概率 . 


由 定理 2.2.2 我 们 自然 可 以 把 阶梯 随机 变量 的 期 望 扩张 到 非 负 随 机 变量 上 . 为 
此 , 若 X 是 非 负 随机 变量 , 我 们 可 以 在 8 中 选择 一 个 单调 增 序列 {X,n > 1}, 使 
Xn 1TX, 然 后 通过 
EX = lim PEXn] 
来 定义 非 负 随 机 变量 X 的 期 望 . 为 使 定义 合理 , 我 们 必须 证 明 上 式 右边 不 依赖 于 
2 中 阶梯 随机 变量 列 的 选取 , 为 此 我 们 需要 下 面 的 引 理 . 
引 理 2.4.1 设 {X%,n 之 1} 和 {Yi,n >1 是 8 中 两 个 增 序列 . 车 


lim 1 X, < lim + Y,, 


lim TEL < lim +E[Y,]. 
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证 令 Znm = min{ Xn, Ym}, 则 lim 1T Znm = Xn. 注意 到 Xn, Lnm E 6, 故 由 
命题 2.4.1 得 
EI[X,] = lim TEZnm] < lm TEIY], Vnz1. 


令 n 一 oo 即 得 证 本 引 理 . | 
定义 2.4.2 设 X 是 (2,oz,P) 上 的 非 负 随机 变量 , 0 < Xn € @, 且 Xnf 关 , 则 
称 ,lim E[X] 为 六 的 期 望 , 记 为 EX. 


此 定义 是 不 含糊 的 ， 事实 上 , 车 还 有 0 < Y, 1? X, Yh € 8, 由 引 理 2.4.1 得 
lim E[Xn] = im E[Z]. 

由 引 理 2.4.1 及 非 负 随机 变量 的 定义 , 还 可 得 到 如 下 两 个 重要 结果 . 

定理 2.4.1 设 X 为 非 负 随 机 变量 , 则 


EX=sup{EY: Y < X,Y € @}. 

这 是 引 理 2.4.1 的 直接 推论 . 

定理 2.4.2( 单 调 收敛 定理 ) 设 0 < XT 了 XX, 则 EE[X%] 1 EX. 

证 对 任意 固定 的 neN, 存在 0 < Xm € 6,m > 1, 使 得 

,lim T Xnm = Xn. 
记 Zi = Wa, Xim, 则 Zn €E 8@, Zmf 且 
Xnm 和 Zm < Xm, nN&m, 
于 是 Zi 1X. 由 引 理 2.4.1 得 
E[Xn] = lim 1 BIXnm] < lim 1 ElZm) < lim TE[Xm). 


7 OO 


再 令 n 一 co 即 得 本 定理 . 目 
推论 2.4.1 若 随 机 变量 Xn > 0, n> 1, 则 


[和 -J 
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证 令 5 二 并 XX, 则 0< S17 X;. 由 定理 2.4.2 即 得 本 推论 . 上 
z=1 i=1] 





本 推论 说 明 对 非 负 随 机 变量 而 言 , 求 和 号 与 积分 号 可 交换 . 

现在 转 入 对 一 般 随 机 变量 数学 期 望 的 定义 . 

定义 2.4.3 设 和 为 (2,w,P) 上 的 随机 变量 , 若 E[X+] < co EIXK-] < co, 则 
称 X 为 可 积 的 , 并 称 

EX = E[X+] 一 ELX-] (2.4.4) 

为 随机 变量 X 的 期 望 . 

如 果 EIX+] 和 E[X-] 中 至 少 有 一 个 是 有 限 的 , 则 称 XX 为 拟 可 积 的 , X 的 期 望 
EX 仍 由 式 (2.4.4) 定义 , 这 时 EX 可 能 取 值 +oo 或 一 cc. 

一 个 自然 的 问题 是 , 由 式 (2.4.4) 定义 的 随机 变量 的 期 望 是 否 仍 保持 当 X 为 
阶梯 随机 变量 时 期 望 所 具有 的 线性 性 、 单 调 性 和 单调 连续 性 ? 回答 是 肯定 的 . 

定理 2.4.3 设 光 是 定义 在 (2, 允 ,P) 上 拟 可 积 随 机 变量 的 全 体 , 则 由 式 (2.4.4) 
定义 在 多 上 的 期 望 E[] 有 下 列 性 质 : 

(1) 车 c 为 常数 , 则 ElcX] = cEX; 

(2) 若 和 入 了, 则 EX 入 也 Y; 

(3) [IEX| < EIX|; 

(4) 若 X-,Y- 可 积 (或 X+,Y+ 可 积 ), 则 

E[X+Y]= EX+BEY; 

(5) 设 Xu 1 XX, 车 至 少 存在 一 个 n, 使 X 可 积 , 则 E[X%] 7? EX; 车 X14 守 且 
至 少 存在 一 个 使 X+ 可 积 , 则 E[Xn] | EX. 

证 (1) 当 因 >0 和 c>0 时 , 设 XTX, XneE@, 则 cX, €@,cXn TcX. 由 
ElcXn] = cE[X，] 立 得 结论 (1) 成 立 . 当 X e 和 时 ,注意 到 

CX=cXt—cX , cy>0; 
以 及 
(ecX)+ =—-cX-, (cX) = -cX+，c<0. 

结论 (1) 仍 成 立 . 

(2) 由 于 XY 蕴涵 了 Xt+ 乏 Y+;,X- >Y-, 故 由 引 理 2.4.1 即 得 . 
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(3) 由 于 一 |X| < X < |X|, 再 由 结论 (2) 得 出 . 
(4) 首先 设 之 0,Y 之 0, 则 存在 0 << XT? X,0 < YT?Y, Xn,Yn€E@. 但 
也 [和 + Yn,] tT ELIX+Y], EL 1 EX, El[Y,] 1 EY, 
故 
E[X +Y] = EX+EY. (2.4.5) 
其 次 , 若 X! 和 Xs 为 非 负 随机 变量 , 有 旦 至 少 有 一 个 可 积 , 则 X = Xi 一 X2 是 拟 可 
积 的 , 此 时 EX = ELXi] -EI[X2]. 事实 上 , 我 们 有 
Xt<X, X-<X 
(由 此 知 X 为 拟 可 积 的 ), 故 由 XX+ 十 X2 二 六 -十 Xi 知已 X+ 十 Xa2] 王 卫 X -十 怀 1]. 
由 式 (2.4.5) 得 
E[X+] + E[X2] = E[X-7] + EI[Xil]. 
因为 E[X+], EI[X-] 不 能 同时 为 +co, 故 移 项 即 得 EX = EIXi] 一 E[X2]. 在 XX-,Y- 
可 积 (或 X+,Y+ 可 积 ) 条 件 下 , 结论 (4) 可 由 下 面 分 解 推 出 : 
X+Y=(Xt+Y+)- (X- +Y-). 
(5) 设 XX, TX, 且 存在 一 个 no, 使 E[Xi] < co, 则 
Xi > Xt Xi < Xi VN no, 
即 对 一 切 n 之 nio, Xn 和 XX 为 拟 可 积 的 , 而 
0< Xnt+ Xa TX+Xi, Vnzno. 
由 单调 收敛 定理 (定理 2.4.2) 及 结论 (4), 得 
EI[Xn] + E[Xi] 1? EX + ELXA]. 
由 此 证 明了 E[X,] 1 EX. 注意 到 X, 4 X 等 价 于 (一 Xn) 1 (天), 故 当 如 了 天时 
结论 (5) 也 成 立 . E 
注 1 把 定理 2.4.3 中 的 随机 变量 换 成 可 测 函 数 X 仍 可 得 到 上 述 五 条 性 质 , 此 
时 EXe 了 的 充 要 条 件 是 可 测 孙 数 X 为 可 积 的 , EX < 下 昔 涵 着 P(X = 士 co) = 0. 
注 2 若 久 为 复 随 机 变量 , XX = XX +TiX2,， 其 中 Xi1,X2 为 实 随机 变量 , 定义 
EX = EIX1] + iE[X2], |X| = (X? 十 X3)'2, 则 性 质 (3) 仍 成 立 . 
由 定理 2.4.3 可 得 如 下 重要 结果 . 
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定理 2.4.4(Fatou-Lebesgue 引 理 ) 设 {Xnm > 1} 是 (2,oz,P) 上 的 可 测 函 
数列 ,Y 和 2 是 两 个 可 积 的 可 测 函 数 , 则 


Xn < Z => limsupElX,] <E [msup x 
了 一 OO 人 一 OOD 
Xn > 了 一 > 忆 [iminf Xi| < lim inf E[X;l]. 
他 一 OO 人 一 CD 
如 果 Y X11 或 Y < Xn<2 且 XX 一 六, 则 


lim E[X"] = EX. 
全 -一 CO 


证 首先 假设 X > 0, 则 XX, >> inf Xi 1 lim inf Xn, 于 是 


E[Xn| >E [a x ， Vn 之 1. 
天 之 也 

由 定理 2.4.3 即 得 

liminf E[Xn] > lim ® [a x =E [iminf xn| . 

N00 用 一 Oo 开 之 也 人 一 Oo 
一 般 情 况 下 , 只 要 把 X;, 换 成 Xn, 一 了 或 Z 一 Xn, 再 注意 到 YY 和 2 可 积 即 可 得 到 
所 需 的 两 个 结论 , 并 由 此 推出 第 三 个 结论 . a 

由 定理 2.4.4 马上 可 推出 


定理 2.4.5 (控制 收敛 定理 ) 设 |X,| < Y, 且 EY < ooo， 车 XX 一 X, 则 
E[Xn] — EX. 

注 进一步 的 研究 可 知 这 两 个 定理 中 的 条 件 可 以 稍稍 放宽 . 例如 , 在 Fatou- 
Lebesgue 引 理 的 最 后 一 个 结论 中 ,XX 一 X 可 放宽 为 对 几乎 所 有 的 w € fn, 有 
Xn(w) 一 关 (w); 在 控制 收 伍 定理 中 , X% 一 X 可 放宽 为 X, 依 概率 趋 于 XX. 

作为 应 用 , 我 们 可 以 得 到 如 下 一 个 非常 有 用 的 结论 : 

定理 2.4.6 设 {级 ,iE 了 为 xY 的 一 个 子 o 代数 族 , 则 { 罗 ie I} 相互 独立 
等 价 于 对 了 的 任 一 有 限 子 集 J, 对 每 个 0 < XX € 多 ;, jE€ J, 有 


也 加 站 = | [ELX;]. (2.4.6) 


jEJ jE€EJ 
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证 取 X = 7s,, Be 允 )je J 立 得 充分 性 . 下 证 必要 性 . 设 { 多 jie 1} 相 
互 独立 , J C 了 为 有 限 下 标 集 , 不 妨 先 设 J = {1,2}. 车 XX = Ip,, Bj; € %;, j= 1,2, 
则 式 (2.4.6) 成 立 . 由 期 望 的 线性 性 质 知 当 Xi 和 Xs 为 阶梯 随机 变量 时 , 式 (2.4.6) 
仍 成 立 ， 现 假设 0 < X; € 多 ;, j = 1,2, 则 必 存 在 Xmj € 8 且 Xn; & 多 ;, 使 得 
0 < Xn; 1 六;, 其 中 7 = 1,2. 由 单调 收敛 定理 知 


ELXni Xn2] 1 EL[X1X2], ElXnm]T EIX1], ELXn2] 1 ELX2]. 


又 
E[Xn1Xn2] 二 E[Xn1l] ' E[X",2], Yn 之 1. 


令 n 一 oo 即 得 EE[X1X2] = 已 LI BE[X2]. 由 归纳 法 可 证 得 对 7 的 任 一 有 限 子 集 J 
车 0 < XX; € 多 ;, jE&€ J, 则 式 (2.4.6) 成 立 . 从 而 定理 成 立 . I 


2.5 概率 变换 与 积分 


在 实际 问题 中 ,我 们 经 常会 遇 到 求 随机 变量 X 的 函数 f(X) 的 期 望 BIF(X]] 
的 问题 . 一 方面 , f(X) 是 (2, 2,P) 上 的 随机 变量 , 故 
EA(X)] = [F(X(w)) P(dw), 
另 一 方面 ,P 经 X 在 (R, 多 ) 上 导出 一 个 概率 P', 故 f(X) 也 可 看 做 是 (R, 多 ,P') 上 
的 随机 变量 , 其 期 望 为 
EIfA(X) = ff (2) P'(dz). 
直观 上 , 这 两 者 应 该 一 致 . 下 面 的 定理 对 这 一 直观 给 出 严格 的 证 明 . 
定理 2.5.1( 积 分 变换 定理 ) 设 9 是 可 测 空间 (2, 史 ) 到 可 测 空间 (T, F) 的 可 
测 映射 , P 是 (2, sz) 上 的 概率 , P' 是 P 于 (T,F) 上 由 9 导出 的 概率 , 则 对 任意 
feF,Be 人 了 ,有 
J im f(g) Pdw) = ff P'(at), (2.5.1) 
这 里 等 号 是 指 若 等 式 的 任何 一 边 有 意义 , 则 另 一 边 也 有 意义 且 相 等 
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注 这 里 全 上 的 ve 代数 9 可 以 是 yf 经 g 导出 的 , 也 可 以 比 它 更 精细 , 但 由 于 
ge 好 /9F, 故 可 以 仅 在 由 9 导出 的 o 代数 上 来 考虑 . 


证 令 儿 ={f: feE3F} 及 
Hf = {fe F: [fo(w)) Pdw) = [FP (db 上 
我 们 来 证 明 . 乱 是 一 个 .名 类 . 
(1) 设 f(t) = Is(t), Be 了 F, 则 由 导出 概率 的 定义 得 
fTa() P'(dt) = P'(B) = P(g 1(B)) 
= flim) Pldw) = {1a(9(w)) P(dw), 
即 Is € .特别 地 , 取 B=7T, 得 le %. 
(2) 由 积分 的 线性 性 质 知 , .党 是 一 个 线性 空间 . 
(3) 设 0 芝 访 1 记 万 Es: 因 , 则 由 单调 收敛 定理 得 
jif WP'(aD) = lim [f(t) P'(ai) 
= lim |, f(g(w)) P(dw) 
= [f(g(w)) Pldw), 
旭 f ep%. 


由 上 述 分 析 知 , 0 是 一 个 名 类 . 由 函数 形式 的 单调 类 定理 知 对 一 切 f € 9， 
有 fe.%. 


对 任意 Be Ffe 3, 令 h(t)= f(t)18(t), 则 he 从 而 he 和. 于 是 
jn f(t) PP'(dt) = 上 PDTB 人 Pdb) 
= ,f(g(w)) TB(g(w)) P(dw) 


= ,f(g9(w))1g- (8B)(w) P(dw) 
国 J f(g(w)) P(dw). 
定理 证 毕 . ， 
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在 定理 2.5.1 中 , 取 9 为 随机 变量 X, (T, 9) = (了 ,多 ),P' 是 P 经 XX 在 (R, 儿 ) 
上 导出 的 测度 , 设 P' 对 应 的 分 布 函数 为 下 , 由 于 P' 与 下 是 一 一 对 应 的 , 故 在 定理 
中 取 f = X, 则 


| X(w)P(dw) = 人 ZP'(dz) = 人 zxF(dzx) 全 上 zdF(z), 
即 随机 变量 X 的 期 望 等 于 x 关于 对 应 分 布 函 数 的 Riemann-Stieltjes 积分 . 


例 2.5.1 设 因 = (Xi1,… ,XX) 是 (8,4,P) 上 的 nn 维 实 随机 向 量 , 它 的 分 布 
函数 为 已 则 对 任意 G es 多 '", 有 


P(X e G) = 人 F(dz) = [ . | dF (z1,... ,Tn). 
事实 上 , 在 积分 变换 定理 中 , 令 (T, 了 ) = (R", 多 疏 ), f= 1,9 二 站, 则 有 
P(X eG)=P(X-'(G)) = jx uo, P(dw) = 人 P'(dz) 


= J rs) = Jar ,en) 


特别 地 , 取 G = {(x1,… ,Zn) ; X11 十 … 十 Zn 万 ), 则 P(X & G) 就 是 nn 个 随机 变 
量 之 和 的 分 布 函 数 . < 


2.6 Radon-Nikodym 定理 


2.6.1 不 定 积 分 和 Lebesgue 分 解 


首先 让 我 们 来 回忆 一 下 关于 c 加 性 集 函 和 有 限 的 概念 . (2, sz) 上 的 一 个 集 
函 p:.oz 一 肛 称 为 o 加 性 的 , 车 对 任意 4。e 7, 4 un 4 = 二 0,Yn 关 mm, 有 


~ (5 4 一 》， pAn)- 


以 下 总 假定 p(0) = 0, 以 保证 yp 的 o 加 性 蕴涵 ”的 有 限 加 性 . 若 p 为 (98,4) 上 的 
一 个 o 加 性 集 函 , 则 或 者 


—o0 yA)<%, vAEwW, 


65 


概率 论 教 程 OOOOOOOOOOOO00000000000O00G00 


或 者 

一 oo<o(4) 乏 co，V4EB. 
事实 上 , 若 该 结论 不 成 立 , 则 存在 4e zf， Be zy, 使 5p(4) = +oo0, p(B) = -oo 注 
意 到 4UB = (A\B)UB = (B\4)U 4, 依 假定 , 我 们 有 


(AUB)= yp(A\B) + »(B), 
of(4UB) = p(B\A)+ vy»(Ah). 


为 使 第 一 个 等 式 右边 有 意义 , 必须 有 wp(A\B) < oo; 为 使 第 二 个 等 式 右 边 有 意义 , 必 
须 有 p(B\A) > -oo0. 这 样 分 别 从 上 两 个 等 式 推出 p(4UB) = -oo, gp(4UB) = +oo， 
从 而 导出 矛盾 . 

若 p 为 (2,oz) 上 的 一 个 e 加 性 集 函 , 则 称 p 为 一 个 符号 测度 . 若 e 加 性 集 函 
yp 满足 0< vp(4) < M < o0,YVhE oY, 则 称 yp 为 一 个 有 限 测 度 ; 若 M = +co, 则 称 
yp 为 广义 测度 . 车 测度 wp 满足 对 任意 4 c oy, 存在 4 cam>l 使 4c U A, 
且 p(hn) < oo 对 一 切 n 成立, 则 称 p 为 oc 有 限 测度 本 

设 jn 和 jiz 为 (8, 7) 上 的 两 个 测度 , 上 且 其 中 之 一 为 有 限 测度 .定义 p = jp 一 px2， 
即 对 任意 4e wz, p(4) = jn(4) 一 pz(4), 则 yp 是 一 个 符号 测度 . 反 过 来 , 对 一 个 符 
号 测度 , 是 否 可 以 分 解 为 两 个 测度 之 差 ? 回答 是 肯定 的 , 这 就 是 下 面 著名 的 Jordan- 
Hahn 分 解 定理 , 其 证 明 取 自 严 加 安 (2005, p.56 - 58). 


定理 2.6.1(Jordan-Hahn 分 解 ) 设 2 为 o 代数 gf 上 的 一 个 符号 测度 , 对 任 
意 4e xx, 令 





(2.6.1) 
wp (4) = 一 inf{fo(B): BCA,BE .wwY)}, 


则 pt 和 wp 为 测度 , 其 中 之 一 为 有 限 测度 , 且 yw = p+ 一 yp . 此 外 ,存在 De 必 ， 
使 得 对 任意 4 € <， 


p+(A) = supfe(B): BCABeEwY), | 


or(4) = p(ANMD), 2 (4)= -pA4ND'). 
证 不 妨 设 p(A) > -co,Y A eyY. 首先 证 明 存 在 集合 De .xy, 使 
PAND)Z0, pAND)S<O0, vAew. (2.6.2) 


为 此 , 令 
GF={B: pt(B)=0, Be wy), 
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则 
FG={BEew: VCECB, Cewy,yp(0) <o}. 
易 见 多 对 可 列 并 运算 封闭 , 且 当 Be 时 , 对 任意 CCB 必 有 Ce%. 记 
a=inf{g(B): Be @), 


则 存在 Be ,n>1, 使 得 lm p(Bn)=Q. 记 GB 及 D=G°, 则 GE%， 
人 一 OO n=1 
并 且 
a < p(G)= p(Bn)+ oN\Bn) & plBn), n>1. 


令 n 一 00 得 0 a= wy(G) > -co. 注意 到 G ew, AND: CG,Y A ey, 于 是 
AND: ee %, 即 式 (2.6.2) 中 第 二 个 关系 式 成 立 . 


其 次 证 明 式 (2.6.1) 中 第 一 个 关系 式 成 立 . 我 们 用 反 证 法 . 假定 存在 4 C 也 ， 
4ex 好 ,使 4) <0, 则 pt+(4) > 0. 事实 上 ,车 pt+(A)==0, 则 Ae%,AUD°= 
AUG eB. 但 o(4UG) = gp(4)+ yp(G) < pg(G) = a, 这 与 a 的 定义 矛盾 , 所 以 
of(4) >0. 由 wp1(4) 的 定义 , 存在 A1 C 4, A1 € x9, 使 

p(A1) > 3 min{p+ (4),1} >0. 
此 时 , p(A\A1) = w(4) - 2(41) < 0. 由 上 所 证 类 似 可 得 p+(A\A1) > 0. 依次 类 推 
n—l 
可 得 , 存在 A,, s xf, hn C A\ 》 4x, 使 得 
k=1 
n—1l1 
p(An) > > min 人 (从 研 4 了 > 0. (2.6.3) 
k=1 
由 9 的 o 可 加 性 ,得 
2(4) = 》 .2(4k) + (A\ 二 . (2.6.4) 
k=1 天 一 1 


因为 p(L4) < 0, 所 以 习 p(4k) < oo, 进而 p(4n) 0. 再 由 式 (2.6.3) 得 
天 一 1 


im pt (A 一 0. 
k=1 


67 


概率 论 教程 DOOOOOOOCOOOOOOOODGGCGDODDODE 


由 yt 的 定义 知 w+ 具有 单调 性 , 所 以 w+ (人 A 时 ht) = 0, 进而 由 前 面 所 证 知 
k=1 


? (A 2 A ) > 0 (否则 , 有 p+ (A >》 A > 0, 矛盾 )， 于是, 由 式 (2.6.4) 得 
p(A) > 0， 这 与 假定 的 (4) < 0 矛盾 . 因此 ， 式 (2.6.1) 中 第 一 个 关系 式 成 立 . 
最 后 证 明 本 定理 的 结论 . 对 任意 A e ,Be ,BC 4, 则 


wv(B)+v((A\B)ND) = pANMND) UB) 
= pAND)+ p(BND'). 
故 由 式 (2.6.2) 知 p(B) 和 p(4nD), 从 而 有 e+(4) = wp(A4ND). 同 理 可 证 py-(4) = 


一 p(AmD°). 因此 , pt+ 和 yp 为 (8,4) 上 的 测度 , 且 2-(P) = -2(De) < co, 即 
27- 为 有 限 测 度 . 此 外 , 显然 有 yp = p+ 一 gp-. 定理 证 毕 . I 


注 1 我 们 称 yp = pT 一 yp 为 vw 的 Jordan 分 解 , 称 p+ 和 wp 分别 为 op 的 正 
部 和 负 部 , 称 lp| = pt +oe- 为 op 的 变 差 测度 , 称 |ol(2) 为 p 的 全 变 差 . 车 |wp| 为 
有 限 的 (oc 有 限 的 ), 则 称 yp 为 有 限 (c 有 限 ) 符号 测度 . 设 f 为 (8,.x) 上 的 可 测 函 
数 , 如 果 Je jder 和 所 jdo- 存在 , 且 ,fdwt+ -人 do- 有 意义 , 则 定义 

ffae= [fapt -yao 
并 称 之 为 f 关于 符号 测度 w 的 积分 . 


注 2 我 们 称 2 = D+ D° 为 vp 的 Habn 分 解 . 注意 Hahn 的 分 解 不 一 定 唯 一 
( 见 本 节 注 4, 但 我 们 有 如 下 的 结论 : 设 9 = D1 十 Ds = D2 十 DS 是 0 关于 符号 测 
度 p 的 两 个 Hahn 分 解 , 则 对 任意 4e cy, 有 


pAND)=p(AND2s), enD9 = vANDs). (2.6.5) 


往 证 式 (2.6.5). 注意 到 4mn (DANDa) SG Di, 所 以 wp(4n(DNDa))>0. 又 4n 
(Di\D2) = A4NDiND5 5 Ds, 所 以 yp(4N(Di\D2)) < 0. 于 是 , p(A4N(Di\D2))=0. 
同 理 , 有 wp(4n (D2\D1)) = 0. 因此 
p(ANDi) = op(ANDIND> + AN(DI\D,)) 
=p(ANDiND,)+ yp(AN(D\D2)) 
= wp(ANDiN D2) = op(AN D2). “ 
类 似 可 证 式 (2.6.5) 中 第 二 个 等 式 成 立 . 
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注 3 设 = D+ Dr 为 符号 测度 2 的 Hahn 分 解 ( 见 定理 2.6.1), 则 
PD)=sup{p(A): Aew}, vy(D°)=inf{p(A4): Ae ww)}, 
即 2 在 wg 上 能 够 达到 其 上 下 确 界 , 这 是 因为 由 定理 2.6.1, 对 任意 A e 必 , 有 
2 4 = (4) -yp (A) < vt(A) < p+() = yp(D), 
2( 4 >-2 (A) -Pp (0)= p(D°). 
定义 2.6.1 设 ol;ps 为 (02,r) 上 的 两 个 符号 测度 . 如 果 
|p2|(A)=0, Ae of => |p1|(A)=0, 
则 称 pl 关于 ws 是 绝对 连续 的 , 记 为 pl < pz, 这 时 我 们 说 ol 被 ps 控制 . 车 
Pp1 pa 且 oa 1, 则 称 gi 与 pa 等 价 , 记 为 pl ~ jp2. 


下 面 我 们 考虑 一 个 符号 测度 yp 关于 一 个 概率 了 的 绝对 连续 性 . 当 yp 为 有 限 符 
号 测度 时 , < 了 P 的 定义 等 价 于 如 下 叙述 : 


Ve>0, 存 在 6(e) > 0, 只 要 P(4) < 5(e), 4e wm, 
就 有 |o|l(4) < e. 


这 是 因为 若 条 件 (2.6.6) 成 立 , 则 P(4) = 0 蕴涵 对 一 切 e > 0, 有 |e|l(4) < e 从 
而 |p|(4) = 0, 即 yp <<P. 反之 ,假设 vp 为 有 限 符号 测度 , 且 p 饼 P, 但 (2.6.6) 不 成 
立 , 则 存在 e > 0, 对 任意 n > 1, 存在 4 € x 使 得 P(A) < 1l/n2, 但 |pl(4) > 6 
令 4=limsup An € 好 , 则 由 BoreL-Cantelli 引 理 得 P(4) = 0. 另 一 方面 , 定理 1.3.4 
对 有 限 测度 |p| 也 成 立 , 即 


(2.6.6) 


[ol(A) = lal (Himsap A ) > limsup lgl(An) >< 
人 一 OO 也 一 OO 


这 与 p < 了 P 矛盾 . 从 而 当 w 有 限时 , p 关于 P 绝对 连续 与 条 件 (2.6.6) 等 价 . 

但 当 yp 为 o 有 限时 , p < P 并 不 等 价 于 (2.6.6). 反例 如 下 : 设 2 = N, 令 
2 二 儿 (), 9 为 计数 测度 , 概率 P 定义 为 

P({n}) = 三 二 neN. 

显然 , p 为 o 有 限 的 . 若 P(4) = 0, 则 4= 于 是 p(4) =0, 故 ww < 入 P. 但 式 (2.6.6) 
不 必 成 立 . 否则 , 取 e = 1/2, 无 论 5 取 如 何 小 , 总 存在 n 一 n(6), 使 六 1/ < 6, 取 
4= 估 :大 > 对 则 P(4) <6, 但 p(4) = +oo, 矛盾. 人 

与 关于 了 绝对 连续 性 相反 的 概念 是 所 谓 的 P 奇异 . 
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定义 2.6.2 设 ps 是 (人 ,9Y,P) 上 的 一 个 集 函 , 称 ws 是 P 奇异 的 , 若 ps 在 一 
个 P 零 测 集 外 恒 为 0, 即 存在 Ne oy, P(N) = 0, 对 任意 4<e 妈 有 ws(4nNe) = 0. 

下 面 我 们 研究 概率 空间 上 随机 变量 X 的 不 定 积分 的 刻画 问题 . 

定义 2.6.3 设 X 为 非 负 随机 变量 , 称 

EIXTa] = 二 X, Aew (2.6.7) 

为 X 的 不 定 积分 . 

(4) = E[XI4] 是 gt 上 的 一 个 集 函 , 由 期 望 的 性 质 不 难 推出 不 定 积分 有 如 下 
性 质 (以 下 的 4, 4， 总 假定 属于 gr): 

() 乡 关于 了 绝对 连续 , 且 0 < yw(A) < EX， 


JA)=0<—> P(AN{X >0)=0; 


(2) 若 工 是 可 数 的 下 标 集合 , 则 
网 b> 4 = 》 Up(4ih， 
i€ET GE 了 
即 不 定 积分 具有 c 可 加 性 ; 
(3) 若 41 C 42, 则 %(4i) & (A2); 
(4) 车 A 二 (4) 4, 则 ww(A4n) 了 (4) ww(A4); 
(5) 取 A = {X 和 < 可, 则 Who)sm 且 0= U 4 故 不 定 积分 是 c 有限 的 . 
n=1 
由 式 (2.6.7), 可 以 把 不 定 积分 推广 到 每 个 拟 可 积 随机 变量 (或 可 测 函 数 ), 所 定 
义 的 集 函 [4 XX, 4 € 97, 仍 有 上 述 性 质 (1) ~ (5) (或 (1) ~ (4)), 我 们 称 之 为 随机 变 
量 (可 测 函 数 ) 的 不 定 积分 . 由 于 一 个 几乎 处 处 为 零 的 函数 的 积分 为 0， 故 知 不 定 
积分 仍 是 P 绝对 连续 的 , 即 对 P 零 测 集 的 不 定 积分 为 0. 由 上 面 的 性 质 (2) 知 不 定 
积分 是 o 加 性 的 . 车 随机 变量 X 为 拟 可 积 的 , 则 不 定 积分 是 vc 有 限 的 . 
注 4 符号 测度 的 Hahn 分 解 不 一 定 唯 一 . 设 X 为 (8, .xf,P) 上 的 一 个 可 积 随 
机 变量 , 满足 P(X = 0) > 0, 则 XX 的 不 定 积分 (4) = E[XI4| 为 zf 上 的 一 个 符号 
测度 . 记 
Di={w:X(w)>0}, D2={w:X(w) >0), 
则 容易 验证 8 = Di 十 Df 和 f= Ds 十 Ds 为 8 的 两 种 不 同 的 Hahn 分 解 . 
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现在 我 们 要 问 以 上 不 定 积分 各 条 性 质 是 否 完全 刻画 了 不 定 积 分 的 特征 ? 下 面 
的 Radon-Nikodym 定理 对 此 作 了 肯定 的 回答 . 

定理 2.6.2(Lebesgue 分 解 定理 ) 设 概率 空间 (82, xy,P) 上 的 符号 测度 p 是 
有 限 的 , 则 存在 关于 P 绝对 连续 的 符号 测度 pc, 及 P 奇异 的 符号 测度 ws, 使 


p= pe Ps. (2.6.8) 


此 外 , we 和 ws 均 为 o 有 限 的 , we 是 一 个 有 限 随机 变量 X 的 不 定 积分 , 而 环 在 了 
等 价 的 意义 下 是 唯一 确定 的 . 

注 5 we 和 ws 分 别称 为 的 P 绝对 连续 部 分 和 了 奇异 部 分 , X 称 为 pe 关于 
概率 测度 P 的 导数 , 记 为 驹 , 此 导数 在 P 等 价 意义 下 唯一 确定 . 


注 6 如 果 把 概率 空间 (0,.x,P) 换 成 一 般 的 c 有 限 测度 空间 (8, gz, 由, 定理 
2.6.2 的 结论 仍 成 立 , 这 可 以 从 下 面 的 证 明 中 看 出 . 


关于 Lebesgue 分 解 的 直观 意义 , 我 们 可 以 这 样 来 理解 . 由 P 奇异 与 P 绝对 连 
续 定义 知 , 存在 集合 Ne 妈 , 使 ws(Ne) = 0, pe(N) = 0, 我 们 也 称 we 和 ys 是 相互 
奇异 的 , 故 被 分 成 两 部 分 N 及 AN, 从 而 所 有 .x 中 元 素 4 也 被 相应 分 成 两 部 
分 4nN 和 4n(QNWV). 由 于 vw 是 o 加 性 集 函 , 故 wp 有 线性 性 , 从 而 可 以 看 做 是 妈 
上 的 一 个 向 量 . Lebesgue 分 解 定理 无 非 就 是 说 , 对 每 个 yp, yf 可 以 分 解 为 两 个 子 空 
间 {NMA, 4eo 和 {4n(CNN),4Ew} 的 直 和 ,而 “向 量 ”yp 也 可 以 分 解 为 两 
个 “相互 垂直 ”的 向 量 pe 和 ws 之 和 . 由 于 这 个 原故 , 我 们 也 称 we 和 ws 是 相互 垂 
直 的 , 记 为 pe 上 wps. 


定理 2.6.2 的 证 明 由 于 ww 是 oc 有限 的 , 故 存在 4se tf,n> 负 使 人 =U hn 


在 每 个 4 上 w 是 有 限 的 . 由 Jordan-Hahn 分 解 , 符号 测度 p 可 以 分 解 为 两 个 测度 
之 差 , 所 以 我 们 只 要 对 为 有 限 测度 来 证 明 本 定理 . 证 明 分 三 部 分 


(1) 唯一 性 部 分 , 即 在 P 等 价 意义 下 分 解 是 唯一 的 , 以 及 一 个 不 定 积分 在 PP 等 
价 意义 下 唯一 确定 被 积 函数 X. 若 yp 可 以 按 两 种 方式 分 解 为 一 个 P 绝对 连续 部 分 
和 一 个 P 奇异 部 分 


p= pe 十 As = pet ps, 
则 
pe — Pe = ps — Ps: (2.6.9) 
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等 式 左边 是 P 绝对 连续 集 函 , 故 对 所 有 P 零 测 集 恒 为 0, 而 右边 是 P 奇异 的 , 故 在 
一 个 P 零 测 集 外 恒 为 0. 因此 式 (2.6.9) 蕴涵 yp。 一 yp = yp! 一 ps ==0, 从 而 知 v 的 上 
述 分 解 是 唯一 的 . 


其 次 来 证 明 不 定 积分 在 P 等 价 意义 下 唯一 确定 被 积 函数 (随机 变量 ) X. 设 对 
每 个 4e xy, 有 


pe(A) = [x 一 | X', 
则 必 有 X = 关 ', a.s.. 车 否 , 取 A= {X’ 一 对 > 0} 或 4={X’ 一 对 < 0}, 且 设 
P(4) > 0, 则 我 们 有 
[ (xX’—X)#0, 
即 J4X' 尖 J4X, 芽 盾 
(2) 找 yp 的 P 绝对 连续 部 分 . 设 o 为 有 限 测度 , 定义 

Y= {Xer: X20, [xX< v4), vAe wr}. (2.6.10) 

因为 X=0e 党 , 故 多 非 空 .由 上 确 界 定义 知 ,在 多 中 存在 {Xn,n > 1), 使 
Jim j， Xn =sup{f, X, Xe) Ea yn) < oo 


令 了 = sup Xn; 则 0 < TX 人 sup Xk, 设 Ak = {Xk ==Y}， 1<kgn 及 
1&k&n 有 > 


Bi = 41， Bx = 4 .4814 2<k<n, 
则 
n= |) A = > B:, 
k=1 天 一 1 
且 对 每 个 Ae oY, 由 X,€E 纸 得 
j= > =2, AB, Xk < > P(AB:) = p(A). 
令 n 一 o0, 由 单调 收敛 定理 , 得 
xs， 人 ,X= 

因此 ,X 是 2 中 的 一 个 “ 极 大 ”元 . 由 此 令 

os 一 内 一 %e 之 0， 
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其 中 yp。 表示 X 的 不 定 积分 . 以 下 仅 需 证 明 ps 是 奇异 的 . 
(3) 证 明 ws 是 奇异 的 . 令 
1 
Pn = Ps— 卫 ， 


由 ps 的 定义 知 ws 是 有 限 的 , 故 pn 也 是 有 限 的 . 设 其 Jordan-Hahn 分 解 式 为 
= Dn 十 DS, 即 对 每 个 Ae wy pn(4Dn) 之 0 及 pn(A4D:)<0. 令 D= 门 Ds, 则 


对 每 个 4e of 及 任意 自然 数 n, 有 
0 < vs(AD) < -P(AD). 
令 一 oo 即 得 ps(4D) = 0， 为 证 ws 奇异 , 只 要 证 明 P(De) = 0 即 可 . 由 于 
we(4) = pe(4D°), 故 
pe(A) = p(A) ~ pe(AD®) < p(A) — pe(ADn). 
由 此 推 知 


J,(X+ dlp.) = p+ EP(AD) < oN -en(4Do < (4), 


即 关 十 二 1p, € 多. 由 此 知 P(Dn) = 0. 否则 , 我 们 有 
1 1 
f, (x+ 二 C 十 a PDn) > Qi 


这 与 a 的 定义 矛盾 . 因此 , 对 每 个 n, Da 是 P 零 测 集 , 从 而 De = [jj D, 也 是 P 堆 
n=1 

测 集 , 故 o。 是 P 奇异 的 . 定理 证 毕 . | 

如 果 p 是 关于 PP 绝对 连续 的 , 则 上 述 定理 为 

定理 2.6.3(Radon-Nikodym 定理 ) 设 概率 空间 (2, xz,P) 上 的 符号 测度 p 
是 o 有 限 的 , 且 p < P, 则 yp 是 一 个 随机 变量 X 的 不 定 积分 , 它 在 P 等 价 意义 下 
是 唯一 确定 的 . 

根据 Radon-Nikodym 定理 , 我 们 可 以 刻画 概率 空间 中 随机 变量 不 定 积分 的 
特征 . 

推论 2.6.1 概率 空间 (2, of,P) 上 的 集 函 p 是 一 个 在 P 等 价 意义 下 唯一 的 随 
机 变量 X 的 不 定 积分 的 充 要 条 件 是 p 为 o 有 限 , c 加 性 以 及 P 绝对 连续 的 . 此 外 ， 
随机 变量 X 可 积 的 充 要 条 件 是 p 为 有 限 . 
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在 推论 2.6.1 中 , 条 件 的 充分 性 就 是 Radon-Nikodym 定理 , 而 必要 性 已 被 包含 
在 本 节 开 头 的 讨论 之 中 了 . 

推论 2.6.2 车 凡是 可 测 空 间 (1,yY) 上 的 c 有 限 测度 , 且 <P,Y 为 可 测 函 
数 以 及 积分 [Ydy 存在 , 则 对 每 个 4 es zy, 恒 有 


Yd YE dp. 2.6.11 
J Yan= J Ya (2.6.11) 


证 由 <P 及 Radon-Nikodym 定理 知 jy 是 某 个 随机 变量 的 不 定 积分 , 因此 
只 要 对 为 有 限 测度 证 明 即 可 . 令 


HN = {x J ,Xan 存在 , 且 | xd = 人 xsdP， v4eco 
我 们 来 验证 .办 是 2 类 , 其 中 .2 为 可 测 函 数 全 体 . 首先 , 若 瑟 = 1, Be 好 , 则 


[ Igdx = 1(4B) = [, 和 dP = | InSkaP 


故 Is € ,YB EY. 特别 地 , 取 B= 0 得 1e. 罗 ; 由 积分 的 线性 性 知 .和 是 一 个 
线性 空间 ; 最 后 设 Xu € ,0 < XnT 了 TX, 则 [Xdx 存在 , 且 由 单调 收敛 定理 知 对 
任意 4 e wy, 有 


人 ,Xan= lim an Xndp = lim n 人 Xn SaP 
= ,Jim Xn Sap = 上 aap 
即 Xe . 知 . 由 函数 形式 的 单调 类 定理 知 本 推论 成 立 . I 


注 7 在 Radon-Nikodym 定理 中 , 用 一 般 的 c 有限 测度 空间 (2, oz,z) 取代 概 
率 测度 空间 (2, .xy,P) 其 结论 仍然 成 立 . 另外 , 在 Radon-Nikodym 定理 中 , 若 符 号 
测度 o 不 具有 ao 有 限 性 , 则 ww << > 蕴涵 po 是 一 个 可 测 函 数 了 的 不 定 积分 ， 


2(4)= [fd Aewm, 





f 在 v 等 价 意义 下 是 唯一 确定 的 . 如 果 随 机 变量 改 为 可 测 函 数 ( 它 不 必 是 几乎 处 处 
有 限 的 ), 则 其 不 定 积分 (如 果 存 在 ) 仍然 是 o 加 性 的 和 vv 绝对 连续 的 , 但 不 一 定 是 
o 有 限 的 . 读者 可 参考 有 关 书 籍 , 如 Loeve (1978) 的 第 二 章 . 
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设 X 为 (2, sz,P) 上 的 随机 变量 , F(z) 为 它 的 分 布 函数 , 由 于 下 是 取 值 于 
[0,1] 的 单调 非 降 右 连续 函数 , 故 由 测度 论 知识 知 严 的 不 连续 点 构成 一 个 可 数 集合 
{zi,ie J}, 其 中 了 为 可 数 集 . 若 令 


Fa(z) = 》 FE(zk) 一 民 (zk 一 外 ， 


了 类 科 开 


Fe=F -Hy, 


其 中 F(z-) = lim Fly), 则 易 证 Fa 是 取 值 于 [0,1] 的 单调 非 减 右 连续 函数 , 而 到 
是 取 值 于 [0,1] 的 单调 非 减 连续 函数 , 故 页 和 F. 是 两 个 广义 分 布 函 数 . 由 第 1 章 
知 分 布 函数 和 测度 是 一 一 对 应 的 . 设 Ff 对 应 于 到 中 Borel 域 号 上 的 测度 jc, 对 
Lc 关于 Lebesgue 测度 应 用 Lebesgue 分 解 定理 , 得 


Hc = Hac + Hs, 
其 中 jac 为 某 个 非 负 Borel 可 测 函 数 g 的 不 定 积分 ， 
ac(B) = fs g(x)dz, Beg, 


而 js 在 某 个 Lebesgue 零 测 集 Ns 的 余 集 上 人 恒 为 0. 由 此 可 知 , 存在 广义 分 布 函 数 
Fac 和 玉 , 它们 分 别 对 应 于 测度 Uac 和 js, 使 得 


一 Fac 十 Fs, 
Fac(7) 一 | OR g(x) > 0, 
并 且 玉 是 一 个 连续 函数 , 其 增长 点 都 在 Ns 中 . 于 是 我 们 得 到 


定理 2.6.4( 分 布 函数 的 Lebesgue 分 解 定 理 ) 设 下 为 分 布 函数 , 则 FF 可 唯一 
分 解 为 三 个 广义 分 布 函数 之 和 


P=Fit+ Fe+h,, (2.6.12) 


其 中 Fs 是 阶梯 函数 , 称 其 为 F 的 阶梯 部 分 , 它 的 跳 点 即 为 下 的 不 连续 点 ; Foc 称 
为 下 的 绝对 连续 部 分 , 即 存在 非 负 Borel 可 测 函 数 g, 使 得 


Fc(z) = | gwdu, gu) 20 ueR; 
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及 称 为 下 的 奇异 连续 部 分 , 这 是 一 个 连续 函数 , 其 增长 点 在 一 个 Lebesgue 零 测 
集 内 . 


关于 有 R"* 上 随机 向 量 天 的 分 布 函数 F(z), x < 有 R”, 也 有 类 似 的 分 解 式 , 关于 
它 的 奇异 连续 部 分 , 可 以 作 更 精细 的 描述 , 有 兴趣 者 可 参阅 白 志 东 、 苏 淳 (1980). 


式 (2.6.12) 还 有 另 一 种 常见 的 表示 法 : 设 Var 下 表示 广义 分 布 图 数 FF 的 全 变 
差 , 即 Var 已 = 下 (+oo) 一 了 (一 00), 则 分 布 函数 下 可 分 解 为 
F=aFi+bF+eh,, 
其 中 a = Var Fa,b= VarFac,c= VarFs. 易 见 a+b+c==1, 而 i, FKL. 和 都 是 
随机 变量 的 分 布 函数 , 即 它们 的 全 变 差 为 1. 


若 久 为 随机 变量 (或 随机 向 量 ), 其 分 布 函数 为 玉 , 若 存在 非 负 Borel 可 测 函 数 
了 ,使 


F(z) = 三 fludu, Vz, 


则 称 X 为 连续 型 随机 变量 (随机 向 量 ). 由 Lebesgue 分 解 定 理 得 , 分 布 函数 连续 并 
不 能 推 知 X 为 连续 型 的 . 


例 2.6.1 设 针 和 YY 为 (8,.x,P) 上 的 两 个 独立 随机 变量 , 若 X 为 连续 型 的 ， 
则 和 + 必 为 连续 型 的 随机 变量 . 


证 设 X 和 了 对 应 的 分 布 函数 分 别 为 Px 和 Fy. 由 于 久 与 Y 独立 , 故 (X,Y) 
的 联合 分 布 函数 为 Fx(z)Fy (y). 设 Fx (zx) 的 密度 函数 为 f(z), 则 


Fx+r(z)=P(X+Y <z)=| | Fx (dz)Fy (dy) 
= may) [fee)dr = Fy(y) {fe Wat 
= [、 dt [三 f(t — YFY (dy). 
由 定义 , 久 十 Y 的 分 布 有 密度 函数 
fx+v(2) = {f(s -Fy(dy), 


即 久 十 Y 是 连续 型 随机 变量 . 4 


利用 这 一 性 质 , 我 们 可 以 对 随机 变量 Y 实行 “小 扰动 ”, 即 加 上 一 个 与 Y 独立 
的 取 值 很 小 的 连续 型 随机 变量 X, 使 扰动 后 的 随机 变量 为 连续 型 的 . 通常 用 作 “ 小 
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扰动 ”的 变量 可 取 (-e,e) 上 的 均匀 分 布 随机 变量 或 密度 等 于 


f(z) = :0 一 e) Tlzlge} 


的 随机 变量 . 这 种 方法 在 概率 论 的 某 些 问 题 研究 中 很 有 用 , 在 多 数 情况 下 处 理 连续 
型 随机 变量 比 处 理 离散 型 随机 变量 要 容易 . 如 果 所 考虑 的 性 质 对 分 布 的 弱 收敛 具 
有 封闭 性 , 那 我 们 只 需 考虑 连续 型 随机 变量 , 而 一 般 情形 利用 上 面 的 小 扰动 方法 通 
过 取 极 限 来 解决 . 

例 2.6.2 设 (X,Y) 服从 边 长 为 1 的 正方 形 对 角 线 上 的 均匀 分 布 , 证明 (X,Y) 
的 分 布 是 纯 奇 异 连 续 的 . 

证 不 失 一 般 性 , 设 正 方形 为 {(z,y) : 0 xz <<1,0 <y<1), 则 由 分 布 函数 的 
定义 知 


0, rzAy<0 
F(Z,Yy)= 4 rzAYy, Og<zAy<1 
1, TAy>1. 
易 见 F(x,y) 是 (x,y) 的 连续 函数 , 又 


OF 0 vy ¢{o): 0<u<l, ud) 
bz5y ry U,V): SS 公信 上 人 一 站 





但 {(u,v): 0<<w < 1, 4=v)} 的 Lebesgue 测度 为 0, 所 以 下 只 是 纯 奇 异 连续 的 . 
证 毕 . < 

例 2.6.3(Nelsen, 2006, p.45) 设 随机 变量 了 X 和 YY 分 别 服从 [0,1] 区 间 上 的 均 
匀 分 布 , 其 联合 分 布 函数 为 


xl-oy, T° > ye 2 
F(x,Yy) TT | ry-8, ze < ye 》 VY (x,Y) 所 [0， 1] 1 
其 中 a, 6 e (0,1) 为 参数 . FF 的 支撑 为 [0,1]?, 但 FF 既 不 是 纯 绝对 连续 的 , 也 不 是 纯 
奇异 连续 的 , 而 是 含有 绝对 连续 部 分 F。 和 奇异 连续 部 分 , 也 即 F = 瓦 。 十 玉 . 
因为 

02 -az zr > 2 
所 以 奇异 连续 部 分 的 概率 质量 堆积 于 曲线 {(x,y) : za = yp,(z,y) € [0,1]?}， 当 
ze < yh 时, 


Fac(zZ),2) = 人 放声 Bg Fl(u,v) dudv 
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zB oF jatp-og)/8 c (0. 12 
XYy 2 二 5 一 a57 ; (2,Y) (0， ) 
当 za > 98 时 , 类 似 可 以 求 出 到。 于 是 当 (zx,y) < (0,1)? 时 ， 


apB 
2 十 有 一 aC 


ap . (at+B—apB)/(aB) 
F(z,y) = Ho [min{z°, ys H+? | 


(atB8—a8)/(a8) 
Fac(T,Y) = F(x,y) 一 5}] ; 


[min{z°,y 


注意 到 及 (1,1) = aB/(a 十 8 一 a6), 故 


P(X =Y9 = 4 
2.7 收敛 性 


2.7.1 本 质 上 下 确 界 


定义 2.7.1 设 X 和 YY 是 两 个 随机 变量 , 若 P(X 了 Y) = 0, 则 称 和 和 了 是 
a.s. 相等 的 , 记 为 久 二 Y, a.s.; 车 P(A4AB) = 0, 则 称 事 件 4 和  a.s. 等 价 . 


类 似 地 , 可 以 定义 可 测 函 数 的 a.s. 等 价 性 . 显然 , a.s. 等 价 是 一 个 等 价 关 系 , 且 
具有 如 下 性 质 : 


(1) 若 于 一 X a.s.,Y = 了 as, 则 对 任意 常数 ct, cz, 有 
CX+ceaY =cecX’ 十 coy' (as.) 及 XY = XY'(a.s.) 


(只 要 以 上 运算 有 意义 ); 
(2) 设 了 为 可 数 的 下 标 集 合 , 若 X; = ,a.s., i E17, 则 


sup{ Xi,i EI} = sup{Yi,i € I}, a.s., 
inf{ Xi,i € 1} = inf {Yi,i € IT}, a.s.; 
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(3) 若 和 =Y,as, 则 EX=EYi 若 X>0 且 EX=0 则 开 =0,as. 这 是 


因 为 _ 
{X>0}= |] {x>i， 
n=] 
车 P(X > 0) = 6 > 0, 则 利用 概率 的 连续 性 及 {X > 1/n} 的 单调 增 性 质 , 知 存在 
no, 使 P(X > 1/no) > 6/2. 此 时 ， 


1 6 
-一 一 -一 
| Xap 之 [XaP 之 元 P(4) > 50 > 0， 


其 中 4 = {X > 1/no}, 矛盾 . 
若 以 充 来 表示 与 X 等 价 的 随机 变量 全 体 , 即 


={X’: X'=X, a.s.}, 


则 六 由 它 的 任 一 元 素 所 确定 . 在 概率 论 中 绝 大 多 数 问题 只 涉及 随机 变量 的 等 价 类 ， 
而 不 是 随机 变量 本 身 , 因此 在 只 有 可 数 个 随机 变量 的 情况 下 , 上 述 性 质 使 我 们 能 够 
像 对 随机 变量 本 身 那 样 对 随机 变量 等 价 类 进行 运算 , 并 可 把 随机 变量 的 等 价 类 与 
它 的 任 一 代表 元 素 等 同 起 来 . 因此 , 车 {Xi,i e 71} 为 可 数 族 , {Xi,i e 刀 是 它们 对 
应 的 等 价 类 族 , 则 sup Xi 只 依赖 于 X;, ie 并 因而 只 依赖 于 {Xi,i e T} 的 上 确 界 . 
下 面 我 们 将 指出 , 即使 在 了 不 可 数 时 , 每 一 族 随机 变量 的 等 价 类 {XX;,i & 1)} 也 有 一 
个 上 确 界 , 称 其 为 本 质 上 确 界 , 记 为 ess.supicr Xi. 但 请 注意 , 当 了 不 可 数 时 , w 的 
函数 sup Xi(w) (其 中 X; e Xi) 不 一 定 是 随机 变量 , 即使 它 可 测 , 它 的 等 价 类 也 不 
一 定 等 于 ess.sup,cy Xi ( 见 下 面 的 例 2.7.1). 

定理 2.7.1 设 {Xi,iE 了 是 (1,yY,P) 上 的 随机 变量 族 , 其 中 了 工 不 必 可 数 , 则 
存在 两 个 其 唯一 性 确定 到 等 价 程度 的 可 测 函 数 ess.supicr Xi 和 ess.inficr Xi, 使 对 
每 个 随机 变量 Y 有 


Xi <Y as.,i ET > ess.supier Xi; < Y a.s., (2.7.1) 


Xi 之 Ya.s.,i ET < ess.inficrX; > Y a.s.. (2.7.2) 


特别 地 ， 对 x 中 每 个 事件 族 {4i;,i € 了 了， 存在 两 个 确定 到 等 价 程度 的 事件 
ess.supicr A; 和 ess.infier hi, 使 对 每 个 4 e cx, 有 
AiCAa.s.,iEl < ess. Supier 4i C A, a.s 


"9 
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Ai 2 Aa.s.,i ET > ess.inficr 4 D 4，a.s.. 
我 们 称 可 测 函 数 ess.supicr Xi 和 ess.infier Xi 分 别 为 {Xi,i Ee 7} 的 本 质 上 确 界 和 
本 质 下 确 界 . 
证 由 于 事件 4 和 B a.s. 等 价 相 当 于 随机 变量 Ta 和 Is 等 价 , 故 只 需 对 随机 
变量 族 证 明 即 可 . 当 了 可 数 时 , 令 


ess. supier Xi = SUP Xi, ss.infier Xi = 过 Xi, 
i€I 


则 这 两 个 可 测 函 数 显然 满足 定理 的 要 求 . 当 7 不 可 数 时 , 设 是 及 到 [中 < 及 上 
严格 增 的 连续 函数 , 例如 arctan, 当 J 跑 遍 了 的 所 有 可 数 子 集 时 , [rap Xo) 的 
jE€ 


上 确 界 o 是 有 界 的 , 我 们 将 证 明 这 一 上 确 界 必 在 了 工 的 某 个 可 数 子 集 Jo 上 达到 . 事 
实 上 , 由 上 确 界定 义 , 存在 可 数 子 集 列 ., 使 


1 
E 1 (sp x) 之 go 一 一 . 
jEJn 7 


令 万 = 站 用, 则 力 仍 为 的 可 数 子 集 . 对 任意 n>>1, 有 
n=1 


E 1 (sup 及 ) EB 1 (sp %) 之 0 一 工 . 
jEJo jEJn nN 


FE | (sup ) 过 0. 
jEJo 


但 由 o 的 定义 知 , 左边 不 会 超过 o, 故 


nl (sp)| = 


令 U= sup Xi 这 是 一 个 可 测 函 数 , 我 们 可 以 证 明 U 即 为 {X;,i € IT} 的 一 个 本 质 
JEJo 
上 确 界 . 
设 任意 随机 变量 Y 满足 XX < Y, a.s.,ieET, 则 UVU<Y,as.. 反之 ,车 UY,， 
a.s., 我 们 要 证 明 对 每 个 ie 71, 有 Xi; < Y, a.s.. 如 果 能 证 得 对 每 个 ie I 了 ,有 Xi < 局， 
a.s., 则 必然 有 X; < Y, a.s., i E I. 往 证 X; < U, a.s.. 由 的 最 大 性 性 质 , 对 每 个 
1 GE 了 


令 n 一 oo, 即 得 


Elf(sup{ Xi, UD] = EL = 0, 
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但 sup{Xi > D, 而 了 为 严格 单调 增 函 数 , 因此 f(sup{Xi,U}) > f(D0), as., 从 而 
sup{Xi,U}=U, a.s., viel. 
由 于 U 是 唯一 的 , 而 U 的 等 价 类 中 任 一 随机 变量 都 满足 式 (2.7.1), 因此 得 出 确定 
到 等 价 程度 的 唯一 性 . 
同 法 可 对 ess.inficr Xi 证 明 式 (2.7.2). 和 


由 本 质 上 、 下 确 界 的 定义 , 可 测 函 数 ess.supicr Xi 和 ess. infier X; 是 一 个 等 价 
类 ， 它们 与 sup Xi 和 inf Xs 不 相同 . 由 式 (2.7.1), ess.supicJX; 是 指 对 每 个 固定 的 i 


iel, 存在 多 CQ, 使 P(@) = 1 且 当 we f2 时 , XX;(w) < U(w). 在 这 里 , 注意 不 
同 的 1 对 应 不 同 的 0. 而 sup Xi; 是 指 存在 2 S 9, 使 P(2) =1, 且 当 we 0' 时， 
i€ 
对 一 切 ie I 了 ,有 XX;(w) < sup Xi. 
iEI 
例 2.7.1 设 (8,.y,P) = (10,1], 儿 ,六 其 中 多 为 了 人 [0,1] 上 Lebesgue 可 测 集 
人 全体, 二 为 工 上 的 Lebesgue 测度 . 对 任意 re 了, 令 


1， 人 也 一 
Xr(w) = 0, wr 


则 Xi(w) = 0, a.s.. 由 定理 2.7.1 知 ess. supyer Xr = 0, a.s., 而 sup Xi = 1, 故 
rel 


ess. supier Xi A sup Xi. < 
i€I 
2.7.2 几乎 处 处 收 鳅 和 依 概 率 收 全 


定义 2.7.2 设 {X,Xn,n > 1} 为 随机 变量 序列 , 如 果 存 在 N € 好 , P(N) = 0， 

使 得 
lim Xn(w) = X(w), vwenN,, 

则 称 该 序列 是 几乎 处 处 收 敏 的 (或 几乎 必然 收敛 ), 记 为 义 , 一 Xas. 或 筷 >. 
若 对 任意 的 v > 0, 一 致 地 有 Xnivy 一 Xn 一 0, as, 则 称 {Xn,n > 1} 是 几乎 处 处 收 
全 (或 几乎 必然 收敛 ) 的 基本 列 . 

由 定义 , 序列 {Xh,n 之 1} 的 极限 就 是 lim sup X 的 等 价 类 中 的 任 一 个 . 现在 来 
考察 一 个 序列 的 全 部 收敛 点 所 成 的 集合 . 首先 注意 到 一 个 几乎 处 处 收敛 的 随机 变 
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量 序列 其 极限 未 必 仍 是 随机 变量 . 为 简单 起 见 , 只 考虑 收敛 到 的 极限 是 有 限 随机 变 
量 (这 也 是 在 定义 2.7.2 中 明确 指出 X 为 随机 变量 的 原因 ). 对 每 个 w € 人 ,Xn(w) 
及 X(uw) 都 是 实数 , 由 普通 收敛 性 定义 知 Xn,(w) 一 X(uw) 是 指 , 对 每 个 e > 0, 存在 
整数 Ne(w) > 0, 当 n > Ne(w) 时 , |Xn(w) 一 XX(w)| < e 由 于 对 每 个 e> 0 等 价 于 
对 序列 ex 4 0 中 的 每 一 项 , 例如 可 取 ex = 1/k. 因而 收 剑 是 指 对 每 个 上 > 0, 存在 整 
数 NE(w) > 0, 当 n > Nk(w) 时 , |Xn(w) 一 XX(w)| < ex. 因此 中 中 收敛 点 集合 为 


{w: Xn(w) = X= UY (Nf: Xr) = X()| < ex} (2.7.3) 
k=1 n=1 v=1 
= 门 (J 门 { :|Xntv (ww) — XW)| < 让 


Ee 
中 
记 
3 
L 
记 
TC 
I 
~ 


由 于 Xn 入 为 随机 变量 , 故 {w: |Xniv(w) 一 关 (w)| < 1/k} € oY, 因此 上 述 集合 
属于 yf. 由 上 式 也 可 知 不 收敛 点 所 成 之 集 


{w: Xn(wW) AP XW = {wv: Xn(wW) — Xv EAH. 


类 似 地 , 对 基本 收敛 点 集 也 有 


{o:Xatz(o 一 ao 一 中 = 站 局 { :|Xntv(wW)— Xn(w)| < 让 E 好 
天 一 1 n=1 v=] 


由 上 面 讨 论 , 我 们 有 

定理 2.7.2 设 X,Xm>1 为 as. 有 限 的 随机 变量 , 则 如 下 条 件 等 价 : 
(1) Xn — X, a.s.; 

(2) 对 每 个 e > 0， 


P (Ut > —0; 


(3) Xntv 一 Xn 一 0, a.s., 对 vv 一 致 地 成 立 ; 
(4) 对 每 个 e > 0， 


P (L {|Xnty — Xl > 9 一 ” 0. 


v=1 
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证 (1) < 一 (2) 设 cx 140, 由 式 (2.7.3) 得 


Xn — X,as. < P(Xn ApX)=0 


一 (人 U [1 {Xn (ww) 一 于 (oo)| < ) =0 


oP (vi A Dt) xe > - 
一 ?人 (RU {|Xnry (Ww) — XCw 29) = Ye>0 


=r (Ut -X129) —0, ve>Dd, 
v=1 


其 中 最 后 一 处 等 价 是 利用 概率 的 连续 性 及 UU fx -XX| > (no0). 
v=1 
(1) < 人 (3) 显然 有 (1) 一 > (3), 以 下 仅 证 明 (3) 一 (1). 为 此 , 令 
A= {ww:; Xntv(w) 一 Xn(w) 一 0, 对 vv 一 致 地 成 立 }, (2.7.4) 


则 P(4) = 1. 对 任意 w € 4, 由 实数 序列 的 Cauchy 序列 判别 法 知 存在 X(w), 使 
Xn(w) XW), {wv: Xn(w) PX(W))} C Ae, 因此 , P(Xn, pp X) < P(A°) = 0, 即 
(1) 成 立 . 


(1) 十 (2) 一 (4) 这 由 下 式 可 知 , 对 任意 e> 0， 


P (Ue >9 <P 上 {IXnv —X| > 引 ) 


v=1 v=1 
+P (Xn —X| > 7) 一 0. 


(4) 一 (3) 设 条 件 (4) 成 立 , 则 


P (A Un) 一 和 (| > 9 =0, ve>0, 


n=1 v=1 


而 该 式 等 价 于 , 对 任意 ej 4 0， 


? (Uf Ut xo) > ) -0 


k=1 n=1 v=1 
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即 条 件 (3) 成 立 , 其 中 4 由 式 (2.7.4) 定义 . 定理 证 毕 . 


关于 序列 是 否 a.s. 收敛 , 我 们 有 如 下 简单 的 判别 法 . 


定理 2.7.3 设 {Xn,n 之 1} 为 随机 变量 序列 , 若 存 在 可 和 正 数 序列 {en,n > 1}， 
使 得 


[Ms 


P(Xn+i 一 Xn 之 en) < Do， 


n=1 


则 Xn a.s. 收敛 于 某 个 随机 变量 ， 
证 令 


An = {|Xnti— Xn|2> en}, n>1. 


由 假设 及 Borel-Cantelli 引 理 知 P(A4，, i.o.) = 0, 于 是 
Pp (liminf 4 ) =1, 


即 存 在 M es sf, P(M) = 0, 使 得 对 任意 we Ms, 存在 N = N(w) >0, 当 n> N(w) 
时 ， 有 we A， 即 [Xnt1(w) 一 Xn(uw)| < en. 从 而 


v—1 
[Xntv(w) 一 Xn(w)| < 》 en 一 0 (对 vv 一 致 成 立 )， 
j=0 

即 {Xn(w),n 之 1} 有 极限 , 记 之 为 了 (ww). 因为 Xn(w) a.s. 有 限 , 故 由 上 式 知 基 (w) 
也 是 a.s. 有限 的 ， 


(Oo) — Xv) < 》 er， 


n=N+1 
且 对 任意 we M°, 有 
X(w) = lim Xn(w) = Xi(w) + Xnti(w) — Xn(w)). I 
n=1 


定义 2.7.3 设 {Xn,n 之 1} 为 随机 变量 序列 , 若 对 任意 的 e > 0, 存在 可 测 函 
数 XX, 使 P(IXn - X| > 6) 一 0, 则 称 X。 依 概率 收敛 于 XX, 记 为 X 一 ，X. 车 
Xniv 一 Xn 一 > 0( 对 v EN 一致 地 成 立 ), 则 称 {Xi,n > 1} 是 依 概率 收敛 的 基本 列 . 


如 果 六 -了 久 , 则 极限 函数 X a.s. 有 限 , 且 在 等 价 类 意义 下 唯一 , 这 是 由 于 
P(|X|= co) =P(R 一 XI = oo) 乏 PE 一 和 > el 一 0. 
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为 证 唯一 性 , 设 二 XXX 工 ,了 , 则 对 任意 e > 0， 
€ € 
P(X—Y|>e) <P (Xn — XI> 35) +P (Xs —Y|> ;) 

令 一 co 得 PKX-Yl>e)=0. 再 令 e 一 0, 即 得 =Y, a.s.. 

定理 2.7.4 XX 工 , X 二 > Xnjy 一 XX -0( 对 veEN 一 致 成 立 ). 

证 必要 性 设 Xn 一, X, 则 由 

€ € 
P(X 一 Xi >) <P (Pt 一 X| > ;) +P (Per 一 天 | > 5) 

得 Xnjv 一 Xn 一 0 (对 ve NN 一致 成 立 ). 


充分 性 设 Xiv 一 Xn 一 ;0 (对 wv EN 一 致 成 立 ), 于 是 , 对 任意 大 > 1, 存在 
n(k) > 1, 使 得 当 n> n(k) 时 ， 


P(Xn+s — Xn| > 2 *)<2 7*, Yrv>1. 


令 n1 = 二 nn(1), nx 二 max{ng_1,n(k)} 十 1,kk> 1; 则 ni 严格 单调 增 ,nk 一 co (k 一 00)， 
且 


》 P( Xe — Xn,| > 2 的 < oo. 
天 一 1 
由 定理 2.7.3 知 , 存在 某 个 随机 变量 X 使 X 一 X, a.s. (k 一 oo). 又 由 于 
P(X,— XI|>O <P (1X — Xn > 5) +P (IXn, 一 X|> 3)， 
取 n> mk 则 当天 一 00,n 一 oo 时 , 上 不 等 式 右 端 趋 于 0, 即 X, 一 X. 
关于 a.s. 收敛 和 依 概 率 收敛 的 关系 , 我 们 有 


定理 2.7.5 (1) 若 X 一 X, a.s., 则 X, 态 ; 
(2) Xa XX 当 且 仅 当 对 {Xa} 的 任何 子 列 {Xn}, 存在 其 子 列 {Xw }, 使 


Xn XX， a.s. (k 一 oo)， 


证 (1) 由 定理 2.7.2 和 依 概率 收敛 的 定义 立 得 . 
(2) 必要 性 设 并 X, 令 {X 为 {Xn} 的 任意 一 个 子 列 , 则 仍 有 Xn 一 
X. 由 依 概率 收敛 的 定义 , 存在 严格 递增 序列 {ni} 使 得 


1 1 
P(e -XI> 计 ) < 去 太 1， 
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于 是 


ce 1 cs、 1 
人 {x -Xl> 革 ) < > 未 一 0 (k 一 co). 
天 一 7 k=m 


由 定理 2.7.2 知 , Xn 一 X, a.s.. 
充分 性 我 们 用 反 证 法 . 假定 X 不 是 依 概率 收敛 于 X, 那么 存在 某 个 e > 0， 
使 得 
limsupP(|Xn 一 X| >ej>0>0. 
P(Xnw — X|>e)>56, vn. 
显然 , {Xn'} 中 不 包含 a.s. 收敛 的 子 列 , 矛盾 . 充分 性 得 证 . 有 
推论 2.7.1 设 DD 为 Rw 中 的 子 集 , 随机 向 量 序列 (Xin,… ,Xm,n), n 之 1, 和 


随机 向 量 (Xi,.… , Xi) 在 DD 中 取 值 , 且 9 为 D 上 的 一 个 实 值 Borel 可 测 函 数 . 若 
g 在 D 上 连续 , 且 Xin 一 > Xi (n 一 00), i 二 1,…,m, 则 


g(Xin, ,Xrmn) > g(X1,: ,Xn). 


证 由 假设 条 件 知 , g(Xin,… ,Xmn) 和 g(X1,:… ,XXm) 皆 为 实 随机 变量 . 对 任 
意 自然 数 的 子 列 {mn 站 , 由 定理 2.7.5, 存在 {n'} 的 子 列 {mi}, 使 得 对 每 个 i,1 <igm, 
有 Xint 一 一 Xi， a.5.. 又 因为 9 在 D 上 连续 ， 所 以 


g (Xin’， 的 ) Xm,n’ ) > g(X1, 0 , Xm) a.S.. 
再 由 定理 2.7.5 可 得 本 推论 . | 
2.7.3 一 致 可 积 和 平均 收敛 
定义 2.7.4 一 族 定义 于 概率 空间 (1, ez,P) 上 的 可 积 随机 变量 {Xi,i e IT} 称 
为 一 致 可 积 的 , 若 当 a 一 cc 时 ， 


SU Xi| — 0， 
er {xie) | | 


这 里 的 一 致 是 指 a 的 选取 与 i 无关. 
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一 致 可 积 随机 变量 族 与 我 们 要 研究 的 各 种 收敛 性 有 很 密切 的 关系 , 因此 有 必要 
研究 何 时 随机 变量 族 是 一 致 可 积 的 . 显然 , 若 Xi, ie 1, 有 相同 的 分 布 , 则 {Xi,i € 了 } 
是 一 致 可 积 的 . 


命题 2.7.1 若 存 在 可 积 随机 变量 XX, 使 得 
[Xi| < X, a.s. iEL, 


则 {Xi,i€ 了 是 一 致 可 积 的 . 特别 地 , 车 有限 , 则 {Xi,i e 7} 是 一 致 可 积 的 . 
证 由 |Xi| <X, as., 则 对 任意 a > 0, {Xi| > a}C{X>a} 及 


Xi < X|, iel, 
ja | ja ,i 
从 而 
Xi < Xl, iel. 

Sap J oxo | jial ,ie 

再 由 期 望 的 单调 收敛 定理 , 有 
ds jx sa Sa ja Xl=0. 
若 了 是 有 限 下 标 集合 , 则 取 X = sup |Xi| 即 得 本 命题 . 有 
IE 了 


直接 验证 了 随机 变量 族 的 一 致 可 积 性 往往 是 不 容易 的 . 下 面 给 出 一 个 一 致 可 
积 的 充 要 条 件 , 由 它 可 以 较 容 易 验证 一 致 可 积 性 . 为 此 , 首先 提出 一 致 绝对 连续 的 


定义 2.7.5 设 {Xi;,iE 了 7 了} 是 一 族 随机 变量 , 若 对 任意 e > 0, 存在 人 > 0, 只 要 
P(4) < me A ey, 就 有 


六 he 
则 称 {Xi,i e 1} 是 一 致 绝对 连续 的 , 这 里 一 致 是 指 ne 的 选取 与 i 无关 . 
定理 2.7.6 随机 变量 族 {Xi,i e 1} 一 致 可 积 的 充 要 条 件 是 : 
(1) {Xi,i&E 了 1} 是 一 致 绝对 连续 的 ; 
(2) 积分 一 致 有 界 , 即 


sup E|Xi| < oc. 
i€ET 
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证 必要 性 由 一 致 可 积 性 知 , 任 给 e > 0, 存在 ac > 0, 使 得 


€ 
su Xi| 二 一 
5 tel>a | 2 


取 ne =e/(2a), 当 P(4) < 4Eog 时 ,有 


sup], [Xil < sup AN{|Xil>a }| Xl+ su up fanix, jz) | Xi 


plore lt P(A 
< < < 一 
入 可 十 可 二 6 
即 {Xi,ie 7} 是 一 致 绝对 连续 的 . 又 
sup EIX: | <atsup ir., ,| Xi| <o+5 < oo， 
即 {Xi,i € 7} 是 积分 一 致 有 界 的 . 
充分 性 当头 之 0 时 , 我 们 有 
EX > XZ2aP(X >a), 
{X>a} 
因此 由 积分 一 致 有 界 性 得 
supP(|Xi| > a) < supE|Xi| —0 (a— 00). (2.7.5) 
1ET a iefl 


由 一 致 绝对 连续 性 知 , 对 任意 e > 0, 存在 ne > 0, 只 要 P(A) < me, 4 ey, 就 有 

sup | < 6， 
从 而 对 每 个 ie 了 只 要 P(Ah;) < me, 4ie 好 ,就 有 

网 | < (2.7.6) 
令 4; = {|Xi| 之 a}, 由 式 (2.7.5), 对 > 0, 存在 a > 0, 使 
P(|Xi| 2>a)<n, viel, 

即 式 (2.7.6) 条 件 满 足 . 由 此 得 

sup J [Xi| < 6e， 
即 充分 性 得 证 . I 
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推论 2.7.2 若 存在 可 积 随机 变量 了 , 使 |Xi| < 了, ie 7 则 {Xi,ie 了 } 是 一 臻 
绝对 连续 的 . 特别 地 , 每 个 可 积 随机 变量 的 有 限 族 是 一 致 绝对 连续 的 . 

除了 as. 收敛 和 依 概率 收敛 外 , 还 经 常用 到 随机 变量 序列 的 平均 收敛 . 

定义 2.7.6 设 {X,n > 1} 是 可 积 随 机 变量 族 (或 其 等 价 类 ), 若 存 在 随机 变量 
和 使 

ElXn — XI|—0 (一 oo)， 

则 称 X 平均 收敛 于 X, 记 为 XX. 

由 定义 , 车 X;, -也 XX, 则 X 必 为 可 积 的 , 因为 由 EX 一 X| 一 ,0 知 , 当 n 充 
分 大 时 ， 





EX — X| <1, 
但 |X|<|X 一 XX| 十 |Xnj, 由 期 望 的 单调 性 得 


EIX| < ElXn — X|+ EXn| < 1+ElXn| < ce. 


平均 收敛 的 重要 性 在 于 它 允 许 在 积分 号 下 取 极 限 , 这 是 下 面 定 理 2.7.7 的 一 个 
推论 . 
定理 2.7.7 可 积 随机 变量 序列 {X),n > 1} 平均 收敛 于 另 一 可 积 随机 变量 X 
的 充 要 条 件 是 
[Xs 一 ,XX (对 4 e ox 一 致 成 立 ). (2.7.7) 


证 必要 性 因为 对 任意 4 e wx， 
XJ X| < 人 1X —X| < EX — X|, 


其 中 最 右边 式 中 与 集合 4 无 关 , 必要 性 成 立 . 
充分 性 式 (2.7.7) 是 指 , 对 任意 e > 0, 存在 N(e), 当 n > N(e) 时 ， 


|[ Xn- X|<5 vAew, (2.7.8) 
取 A = {Xn > X)}, 由 式 (2.7.8)， 


ElX,, 一 六 | = |, (Xn 一 闵 ) -J 一 扎 ) 


(人 (和 
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< 和 一 
DY 了 一 6 
即 充 分 性 成 立 . 
推论 2.7.3 若 XX, 上 XX, 且 P(A4,AA4) 一 0, 则 
网 及， 一 芒 ， 


证 由 条 件 知 


网 一 本 4 < fi Xn — 网 X| 十 J xX 加 性 4 
< ElXn 一 XI+ Il 


由 于 EIX| < co, 故 {XX} 是 一 致 可 积 , 从 而 是 一 致 绝对 连续 的 , 因此 结论 成 立 。 上 


为 了 把 收敛 性 推广 到 下 面 的 Fo 空间 , 以 及 今后 研究 工作 的 需要 , 我 们 介绍 一 
些 有 关 矩 的 不 等 式 . 


2.7.4 ”和 矩 与 矩 不 等 式 


随机 变量 的 p 次 寡 的 期 望 称 为 矩 , 它们 在 概率 论 的 研究 中 占有 非常 重要 的 位 
置 , 如 Markov 不 等 式 、L,p 收敛、 截 尾 法 、 独 立 随机 变量 和 的 研究 中 都 离 不 开 它 . 

ELIX*] (ke N) 与 EXIP(p > 0) 分 别称 为 随机 变量 XX 的 天 阶 矩 及 Pp 阶 绝对 矩 ， 
设 EX = 称 EE(X 一 jp)* 和 EX 一 jj? 分 别 为 随机 变量 X 的 k 阶 中 心 矩 及 p 阶 
绝对 中 心 矩 , 当 =2 时 称 其 为 方差 , 常 记 为 o? 或 Var(X). 类 似 地 , 可 以 对 多 个 随 
机 变量 定义 它们 的 混合 矩 , 例如 


PIX*Y™], PIXIYI], EI(X -Mp)*(Y po)™], ElX -pl*lY — pal™), 





等 . 特别 称 E[(X 一 jw1)(Y 一 12)] 全 Cov( 瑟 了) 为 随机 变量 X 和 YY 的 协 方差 . 关于 
和 矩 , 我 们 有 如 下 性 质 : 


1” 车 也 XI < co, 则 对 任意 >e [0,p]j, EIXI” < oo; 若 为 不 超过 p 的 正 整 数 ， 
则 BEIXS] 存在 有 限 . 
证 当 0<r<gp 人 时， 
IX 三 | + IX Txiyi} < 1+|XP. 
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由 此 立 得 . 
该 性 质 说 明 X 绝对 和 矩 的 有 限 性 昔 涵 了 X 的 所 有 低 阶 矩 的 存在 性 和 有 限 性 . 
2% Cr- 不 等 式 
EIX+Y|" < C.[EIX)I + EIYI"], 
其 中 


27-1， 了 |. 


了 


c -| 0<r<l1 


证 当 7 之 1 时 ,由 xz" 的 凸 性 及 |a+bl" < (Jal 十 | 如 ”可 得 
Jla+b) < 2"- 1 (al" + Jo)”). 
当 0<r<1 时 ,着 0<x<1, 则 
(1+2x)” &1+7z&1+2". 
设 0<bga, 以 bf/a 代 zz, 经 整理 即 得 . 故 对 任意 实数 a 和 4b 有 
lat+bl & Cr(lal + 站， 


以 随机 变量 X 和 YY 分 别 代 a 和。, 然后 两 边 取 期 望 即 得 . 
由 CG; 不 等 式 知 , 若 X 和 Y 的 p 阶 绝对 和 矩 有 限 , 则 着 Y 的 p 阶 绝对 和 矩 也 
有 限 . 


3 Halder 不 等 式 
设 p>1,p- -1+g -1 二 1, 则 


EIXY| < (EX . (EIYI®)'®. 
4°。 Minkowski 不 等 式 
设 p>1, 则 
(EIX +Y[)"? < (EIXIP)? + (BlYIP)?; 
设 XX>0,Y>0 且 0<p<1, 则 
(EIX + Yl?)!/? > (EIXI?) ?+ (ElYI?)/?. 
这 两 条 性 质 的 证 明 依 赖 于 如 下 引 理 . 
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引 理 2.7.1(Jensen 不 等 式 ) 若 5 是 R" 中 屿 区 域 D 上 的 一 个 连续 上 凸 (con- 
cave) 函数 , 则 对 任何 满足 (Xi,… , Xn) < D, as， 的 可 积 随机 变量 Xi,… ,Xn， 
有 

E[IO( XI ,Xn)] < 0E[XI]， ,ELXn,)). (2.7.9) 


证 (Xi1,:… ,Xn) ED, a.s., 及 品 为 是 区域 意味 着 (E[Xi],… ,EXa]) E D. 由 
凸 区 域 的 性 质 知 存在 超 平 面 r, 使 品 在 的 一 侧 . 记 yo = 9(E[X1],… ,E[Xn]), 设 
AI,》n 为 到 "+ 中 过 点 (E[X1],… ,EIXn],yo) 且 方 向 在 曲面 $ 上 方 的 超 平面 的 
方向 余弦 , 即 曲 面 在 切 平面 
y— yo= 》， Xi(z 一 也) 
i=1 
的 下 方 , 故 在 D 上 ， 


PT1, 7 Tn) S PELX1],: ,ELXn)) + 2 Ni — ELX;)). 


以 随机 变量 X; 替换 两 边 的 zi, 则 右边 是 一 个 可 积 随机 变量 , 其 积分 为 9(E[X1],…， 
E[Xn]), 从 而 左边 8(X1,.… ,X,) 是 拟 可 积 的 . 两 边 取 期 望 即 得 式 (2.7.9). I 
取 


bu) = uv (u,v) Ee R14, 0O<a<l, 


puv) = (up 十 Up)P， (uv) eR, p>1. 
易 验证 $ 和 少 都 是 = 民 4 上 的 上 凸 函数 , 因此 对 非 负 随 机 变量 U 和 V 有 
EVV & (EU)* -. (EV) °°, 0<a<l, (2.7.10) 
BE|(UY?+ vr) | < [EU + (BV)?] ， p>1. (2.7.11) 


在 式 (2.7.10) 中 取 a=1/p,1 一 a=1/g, UV = |X|l?,V = |Y|, 即 得 Halder 不 等 式 . 
在 式 (2.7.11) 中 取 UV = |XX|?,V =|Y|]?, 然后 两 边 开 p 次 方 , 得 


(EIX +YIP)? < (EIIX|+ |YI]?)'? 
< (EIX|P)'? + (BIYI?)?, 


即 Minkowski 不 等 式 的 前 半 部 分 . 注意 到 当 0<p<1 时 ,是 D= Ri 上 的 下 凸 
函数 , 类 似 可 得 Minkowski 不 等 式 的 后 半 部 分 . 
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当 p=g=2 时 , Hilder 不 等 式 即 为 Schwarz 不 等 式 : 
(EIXY!|)? < E[X?] . E[Y?]. 
5° 设 7>0, 则 (EIX|")'" 是 7 的 非 降 函 数 . 
证 在 Halder 不 等 式 中 , 取 Y ==1, 则 对 p>1, 有 
EIX| < (EIX|?)'/?. 
设 r2>7T1>0, 令 p=7r2z/r1 > 1, 以 |XIm 替换 上 式 中 的 六, 得 
EIXI" < (EIXI™)™/™. 


于 是 
(EX < (EIXI?)!™. 
6" 设 g 是 及 上 的 非 负 Borel 可 测 函 数 . 
(i) 著 g 为 偶 函 数 , 且 在 [0,oo) 上 非 降 , 则 对 每 个 a 之 0， 


Elg(X)] — g(a) Elg(X)] 
a.s.sup g(X) < PUXI>0) < ga) 
(i) 车 g 在 民 上 非 降 , 则 上 式 中 间 换 成 P(X > a). 


注 这 里 as.supY 是 随机 变量 Y 的 几乎 上 确 界 , 即 存 在 N es 好 , P(N) = 0， 
在 Ne 上 , a.s.supY 是 随机 变量 Y 的 上 确 界 . 


证 因为 g 是 Borel 可 测 和 非 负 的 , 故 g(X) 是 拟 可 积 的 . 若 9 为 偶 函 数 且 在 
[0, ce) 上 非 降 , 令 4 = {|X| > a}, 则 


Elg(X)] = [9(X) + [9(X), 


g(o)P(A) < {9(X) < as.supg(X): P(A), 


0 < .9(X) < go), 


g(a)P(A) < Elg(X)| < a.s.supg(X): P(A) + g(0). 
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这 就 证 明了 (), (ii) 可 类 似 证 明 . 
最 常用 的 g(xz) 有 以 下 几 种 : 
(a) g(z) = e,t > 0, 则 


Elei*] eta 4 
一 ”1 - 苹 > < a tx . 
a.s. SupetX P(X >0)<e “Ble | 
(b) g(7) = |z|", 7 > 0, 则 


EI|X|"—a” 
a.s.sup |XI" 


其 中 右 半边 称 为 Markov 不 等 式 , 当 7 = 2 时 称 为 Chebyshev 不 等 式 . 
(©) g(z) = 了,"7 >0, 则 由 0 < g(z)<1 知 


< P(X|Z oa) < 一 一 2 


Xir ur 1+ar IXF 
- <P(X|>a) < E . 
ix Tre < PXI20 < a BTX 














2.7.5 Ly 空间 和 Ly 收 仇 定 理 


设 X 为 概率 空间 (0, .xy,P) 上 的 随机 变量 , 对 p > 0, 令 
ELD A P)={X: 了 XIP< o0} 
Ly ES Lo(f, 7,P)={X: EIX|? < 00}, 
这 里 基 表 示 X 的 等 价 类 . 当 p 之 1 时, 定义 
| 人 le = (EIXEP)’?. (2.7.12) 


由 Minkowski 不 等 式 及 对 任意 ce 屎 , ||cXllp = |cf -上 ly 知 , 上 :人 是 二 上 的 范 数 . 
车 定义 


| = sup{z : P(IX| > x) > 0}, 
Lo ES Lol ,ot,P)={X: Xllw < 00}, 
Lo SLo(Q,,P) = {X: Xllw < coh， 


由 于 对 任意 z>0 和 ?>0， 
P(X+Y|>7z+y) < P(X|I> 7)+P(Y| > 切 ， 
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故 -llw 为 Lo。 上 的 范 数 , 因而 当 p > 1 时 空间 ZL 为 赋 范 线性 空间 . 当 0<p<1 
时 , 在 L,。 上 定义 距离 
d(X,Y)= ElX— Yh; 


而 当 p > 1 时, 可 定义 
dX,Y)=||X — Yll;, 


因此 , 当 p > 0 时 , Lp 是 线性 度量 空间 . 
由 矩 不 等 式 性 质 (5) 知 
-02 2 2 Ly, 0g&p<gg+o, 
Lo 2 Ly, 2 Lo 2 oo, 0g<p<g&+o. 
注意 到 阶梯 随机 变量 所 构成 的 空间 是 .多 的 一 个 子 空间 , 故 又 是 所 有 .名 , 的 
子 空间 . 其 次 , ,和 Lyp 的 差别 就 在 于 对 应 元 素 一 个 是 随机 变量 , 另 一 个 是 随机 变 


量 的 等 价 类 , 而 qd(X,Y) = 0 等 价 于 X = yY, a.s., 因此 在 同时 研究 不 可 数 个 随机 变 
量 时 应 注意 .名 和 7 的 区 别 . 


下 面 我 们 研究 L, 空间 的 完备 性 及 收敛 问题 , 以 下 设 0 < p < cc. 
定义 2.7.7 设 {Xn,n > 1} 是 L, 中 的 随机 变量 序列 , Xe 三 . 车 


EX 一 XIP — 0, 
则 称 X 依 p 阶 矩 平均 收 和 伍 于 XX, 记 为 X, < XX. 
由 Cr- 不 等 式 , 当 Xn ez 及 Xe7 时 ,有 
EIXn, ~ X|? < Oy (EIXn|? + EIX|?) < oo， 


因此 EIX,, -Xl?* 有 意义 . 由 定义 立 得 L, 中 依 距离 d(X,X) 一 0 可 推出 X, 作 XX 
车 XX, 则 当 0<p<1 时 , 由 Cr 不 等 式 ， 


[EIX%,l? — EIXIP| < 也 |X — X|? 一 > 0; 
当 p > 1 时, 由 Minkowski 不 等 式 ， 
(EXnl?)/? — (EIXIP)Y?| < (EIX, 一 XIP)Y? ,0, 
因此 


一 了 人 一 已 | 生 |P， (2.7.13) 
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定理 2.7.8 设 Xe L,, 则 XX 的 充 要 条 件 是 Xn 一 Xn 2 0( 对 vEN 
一 致 成 立 ). 
证 必要 性 设 Xn 2 义 ， 由 CO»- 不 等 式 ， 
也 |Xn+v — Xnl? < Cy [El|Xntv 一 XP 十 E|Xn, 一 天 站 -一 0 


对 v EN 一致 成 立 . 
充分 性 设 Xi 一 XX。 上 0 对 veN 一致 成 立 , 由 Markov 不 等 式 ， 


PK — Xn| > 6) < ee?BXny 一 Xp 一 0 (对 veN 一 致 成 立 )， 


故 Xi 一 Xn 一 0 对 wv € N 一致 成 立 . 由 定理 2.7.4 和 定理 2.7.5 知 存在 子 序列 
{nx} 使 X 一 X, a.s. 于 是 对 每 个 m， 


Xm — Xn, 一 全 Xn 一 及 ， 3.8.， (k 一 co). 
由 Fatou-Lebesgue 引 理 , 有 
ElX”m — XP =E [um |Xm — Xn l? 
. 天 一 Co 
< lim inf E|Xm — Xnil? -0 (m— 00). 
一 DO 


于 是 存在 某 个 mo > 0, ElXno -XI < co, 从 而 由 Cr- 不 等 式 知 Xe Za、 因此， 
L 
Xn SX. | 


定理 2.7.8 说 明了 Lp 是 完备 的 赋 范 线性 空间 , 即 Banach 空间 . 类 似 可 证 , Lo 
关于 模 || .|l。 也 是 Banach 空间 . 


为 证 下 面 的 L, 收敛 定理 , 我 们 需要 如 下 改进 的 Fatou-Lebesgue 引 理 和 控制 收 
敛 定理 . 


定理 2.7.9(Vitali 定理 ) 
(1) 设 Xn < Un, Un 一 UVU, as., EL 一 ED, 且 7 可 积 , 则 
limsupE[Xn] <E [imsup x . (2.7.14) 
车 Xn > ,VW 一 VV, a.s., B[V] 一 EV, 且 V 可 积 , 则 
liminf E[Xn] > PB [liminf Xx . (2.7.15) 
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(2) 设 | Xu < Un as Un UU, BIU,] 一 EU,U 可 积 , 且 X 上 ; 久 , 则 
X, SX, 
特别 地 , 有 E[Xa] 一 EX. 
证 结论 (1) 中 两 个 断言 是 对 偶 的 , 故我 们 只 证 第 二 个 断言 . 注意 到 X 一 Vi, > 
0, 由 Fatou-Lebesgue 引 理 , 有 
E [im inf(CXn — )| < liminf E[Xn — Val. (2.7.16) 
而 利用 条 件 VW 一 V, as., E[Vn] 一 BV 及 V 可 积 , 得 


E [im inf(X， — 3] =_E 区 sup(Vi, — Xo) 
人 一 CD 


得 一 DO 


之 一 也 lim sup Wh, — lim inf 和 | 
n—00 nDPo0 
=_EV+iE [im inf | ， 


liminf E[X, ~ Va] = ~—EV + lim inf E[X;l. 
N+O0 


全 一 OO 


把 上 两 个 不 等 式 代 入 式 (2.7.16) 即 可 得 式 (2.7.15). 
(2)! 根据 定理 2.7.5, 由 UU 一 U 及 Xn 一， X 知 , 存在 子 列 fo 小 使 U, 一 UU， 
a.s.;, 和 Xn 一 X, a.s., 于 是 0&<U+U 一 |Xn 一 |, a.s.. 由 Fatou-Lebesgue 引 理 ， 
2EU =E [iminf(V + U,— |X,— Xx)| 
< liminf B[V + Us — |Xn — X] 


一 2EU — limsupE|X", — X|. 
?一 OO 


注意 到 EU < ce, 所 以 
lim supE|Xn — X| <0. 


故 EX 一 | 一 0, 即 X 上 XX. 
注 ”在 定理 2.7.9 中 取 Ui = UV, 则 Vitali 定理 即 为 前 面 的 Fatou-Lebesgue 引 

理 (定理 2.4.4) 和 控制 收敛 定理 (定理 2.4.5). 

1 本 证 明 是 由 赵 林 城 教授 提供 的 . 
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定理 2.7.10(Z， 收敛 定理 ) 设 Xn ec Do,p > 0, 考虑 以 下 条 件 : 


(1) X, LX; 
(2) Xn 一 X 2 0 对 EN 一致 成 立 ; 
(3) Xn 一 ,XXX; 


(4) EIXnl? — EIXI? < oo 

(5) {Xnl?,n 之 1} 一 致 可 积 ; 

(6) {|Xnj?,n 之 1} 一致 绝 对 连续 ; 

(7) {Xn 一 PPm 之 1} 一 致 绝对 连续 . 
则 (1) <=> (2) < 全 (3) + [(4) ~ (7) 中 任 一 条 ]. 

证 (1) < (2) 见 定理 2.7.8. 

(1) 一 (3) 由 Markov 不 等 式 立 得 . 

(1) 二 > (4) 见 式 (2.7.13). 

(3) + (4) 一 (1) 由 C; 不 等 式 , 得 

|X» — XI? < Cp ll Xl + |Xnl?] 会 Un， 
于 是 
[Xn — Xl? 0 Uns -> 2Cp| XP, BU] 一 2CoBEIXP < +o0. 

故 由 定理 2.7.9 知 EIX 一 XX|? 一 0, 即 (1) 成 立 . 

(1) 一 > (5) 对 任意 4 e wy, 利用 OG; 不 等 式 ， 


flXne < 0 [fxXP + [Xs — XP|. (2.7.17) 


Xn .了 22， X, 所 以 对 任意 e > 0, 存在 N(e), 当 n > N(e) 时 , E|X% 一 XIP <e/2. 又 
XE Lp, 必 存 在 9(el > 0, 当 P(4) <0(e A EY 时 , [4|XlP? < e/2. 故此 时 只 要 
P(4) < bi(e), 就 有 

sup | [Xnl? & Coe + sup {J [Xrl?, 1 < ke Ne 


多 之 1 


由 于 有 限 族 {|Xxlp,1 < k < N(e)} 是 一 致 可 积 的 , 故 存在 bz(e) > 0, 只 要 P(4) < 
62(e) 就 有 
[XiP <e 1<isN( 
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取 5(e] = min{61(e), 52(e)}, 当 Ae wy, P(A) < 56(e) 时 ， 


SU Xml2 < (Cy + 1)e, 
sup J Xn < (Co + 1) 


即 {|Xj?,n > 1} 一 致 绝对 连续 . 再 由 XX, 必 存 在 N, 当 > N 时 ， 


EX 一 和 <1. 
在 式 (2.7.17) 中 取 4= 8 得 


sup EIXn|? < Cp|EIXIP +1+ sup ElX»,— XP|<%, 
nl l1<n&N 


即 {|Xnl?,n 之 1} 积分 一 致 有 界 . 由 定理 2.7.6 知 {|Xnl?,n > 1} 一 致 可 积 . 


(3) + (5) 一 (1) 先 证 Xe Lp， 因 为 X 二 ，X, 所 以 存在 子 列 {n'} 使 


Xn 一 六 a.s.. 由 Fatou-Lebesgue 引 理 知 


EIX|? = Eliminf |X»|?] < limin{f E|X»|? < sup EI|Xn|? < 0, 
n>1 


即 X ezZo. 又 {|Xnj?,n 之 1} 一 致 可 积 , 故 也 是 一 致 绝对 连续 的 , 即 对 任意 给 定 的 


e > 0, 存在 6(e) > 0, 只 要 P(4) < 56(e),VA Ey, 就 有 
L | 和 2 < 6 人 peP<e vn>z1. 
再 由 Xn 一; X 知 , 必 存 在 N(e), 当 n > N(e) 时 ， 
P(Xn — X|> © < 6(e). 
因此 , 当 n > N(e) 时 , 利用 C; 不 等 式 及 式 (2.7.18) 和 (2.7.19) 得 


EX — XpP= | 


Xn — XI 
{|Xn—X|>e} | +j 


[Xn 和 XP 
{|Xn—X|<e} 


< 了 了 p 
< Cp [fox a [Xn + jx IX| | te 
< 2Cpe + ef, 


故 XXX. 
(1) 二 (6) 在 (1) 一 > (5) 中 已 证 . 


(2.7.18) 


(2.7.19) 
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(3) + (6) 一 > (2) 任 给 e > 0, 令 
Any = {|Xntv — Xn|>e)}, v1. 


由 XX 于 知 , Xnjw 一 Xn 0 对 veEN 一 致 成 立 , 故 P(h4nv) 一 0 对 v 一致 成 
立 . 再 由 {Xn|?,n > 1} 一 致 绝对 连续 性 ， 


Per 一 0 /IXnl? 一 0 (对 v 一 致 成 立 )， 
故 先 令 n 一 co, 再 令 e 一 0, 有 
ElXntry 一 Xnl? 一 ] 1Xn+rv Xnl? 十 ] |Xn+v Xn|? 


< [f, Xa + flXaP| +e 
一 > 0 (对 v 一致 成 立 )， 


即 (2) 成 立 . 

(DD) 二 (7) 记 二 = |X 一 六?, 由 ,上 0 知 ,对 任 给 e>0, 存 在 N, 当 n>N 
时 , E[Y%] < e. 对 于 给 定 的 N, {7,1 < nN} 是 一 致 可 积 的 , 故 存在 b(e) > 0, 当 
P(A) < 6(e), 4e sy 时 ， 


sup | yn < 6. 
1gn&N* A 


因此 , 只 要 P(A) < 6(e), 就 有 


sup | Yn sup | Yh +e< et+e= 2e， 
mn 31 4 1<n 和 NA4 


即 条 件 (7) 成 立 . 
(3)+(7) 一 (1) 记 冯 = 六 一 X, 则 {YP,n > 1 一 致 绝对 连续 , 且 7 一; 0. 
由 于 条 件 (3) 和 (6) 蕴涵 条 件 (1), 故 ,各 0, 即 XX 1 
推论 2.7.4 设 p>0, 若 |Xn| <Yn 之 1,Y € Ly 以 及 Xn 一，X, 则 Xn 一 XX. 


证 由 |X。| 7Y,n 之 1, 故 根据 命题 2.7.1 知 {Xnj?,n > 1} 是 一 致 可 积 的 . 从 
而 由 定理 2.7.10 中 (3) + (5) 一 > (1) 得 XXX. 1 


推论 2.7.5 设 Xe Ly p > 0, supBIXal? = C < oo xn 了 X, 则 对 任意 
n 之 1 
re (0,p), 有 XX,, 上 XX. 
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证 对 任意 4e 和 n>1， 


Tr T rT 
j, [Xn = jtxse Xn + AN{|Xn|<a} [Xn 


< Tr 条 
< jx ia | 十 crP(4) 


< a-(p-r) [Xnl? + arP(A) 
{Xn)>0} 


< Ca-(p-") 4 orPp(A). 


任 给 e > 0, 取 充 分 大 的 a 使 得 Ca-te-7 < ef2, 取 6(e) = ea-"/2, 只 要 P(A) < 5(e， 
就 有 


sup | Ka < &, 
n 宛 1 A 


即 {|Xnj",n > 1} 一 致 绝对 连续 . 从 而 由 定理 2.7.10 中 (3)+(6) 一 > (1) 得 Xn XX. 
证 毕 . I 
推论 2.7.6 设 XX, 则 对 任意 7€ (0,p) 有 XX 也; XX. 
证 ”由 矩 不 等 式 5°, 有 


(EX 一 和 门生 (EX 一 XIP)UP 一 0. 


于 是 X, 上 XX. 有 


2.8 避 题 


1. 设 (2, 多 ,P) 中 存在 满足 下 面条 件 的 独立 事件 序列 {An,n > 1}: 


CC 
> Qn = 00, 
n=1 


其 中 an = min{P(4%),1 一 P(A)}, n 之 1. 证 明 此 概率 空间 是 无 原子 的 . 
2. 证 明 单调 函数 是 可 测 的 . 
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3. 
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设 多 为 民 中 的 一 个 o 代数 . 证 明 : 多 C 多 的 充分 必要 条 件 是 每 个 连续 函数 是 多 可 
测 的 . 由 此 说 明 多 是 关于 所 有 连续 函数 都 可 测 的 最 小 o 代数 . 


. 考虑 民 上 的 Baire 函数 . 所 谓 一 个 Baire 函数 是 指 包含 连续 函数 , 并 对 极限 过 程 封 闭 


的 最 小 函数 类 的 函数 . 证 明 Baire 函数 就 是 Borel 函数 . 


. 设 (8, 7) 为 一 可 测 空间 , 多 是 生成 zx 的 一 个 代数 . 令 3p 为 9 上 的 一 族 非 负 实 值 可 


测 函 数 , 满足 以 下 条 件 : 

(1) 若 fg € 6, a8B>0, 则 af + Bge 2; 

(2) 车 fe 6,n 之 1, fn1?f 且 了 有 限 ( 有 界 ) 或 f.14f, 则 fe %; 
(3) 对 任意 4e 多, 有 Tae 和， 

证 明 . 知 包含 Q 上 的 所 有 非 负 实 值 (有 界 ) sy 可 测 函 数 . 


. 设 (2, oz) 为 一 个 可 测 空间 , 多 = {An,n > 1} 为 2 的 一 个 可 列 分 割 , 令 9 = o(wfU%). 


设 9 为 2 上 的 一 个 9 可 测 实 值 函数 , 则 存在 一 列 of 可 测 实 函数 {fi.,n 之 1}, 使 


9 三 >》， fnTAan- 
n=1 


.( 叶 果 洛 夫 定 理 ) 设 f。 和 了 是 有 限 值 的 x 可 测 函 数 , 满足 对 任意 we 4 e wy 有 


fn(w) 一 f(w), 其 中 jn(4) < ee (4 为 上 的 测度 ). 证 明 : 对 任意 es > 0, 存在 4 的 子 
集 BE wy 使 得 1(B) <e 而 在 4- 互 上 访 一 致 收 伍 于 上 


. 设 多 是 定义 在 可 测 空间 (2, wy) 上 满足 如 下 条 件 的 有 界 可 测 函数 所 形成 的 向 量 空 间 ; 


(a) 1 E Ni 

(b) 对 Yf,g EH, 有 sup{f,g9} eX; 

(c 若 户 1 亡 E1 且 | 户 I 乏 M<oo 则 lim 亡 EL 

证 明 : 存在 x 的 一 个 子 o 代数 多 使 得 1t 是 所 有 有 界 多 可 测 函数 所 组 成 的 空间 . 
提示 : 令 多 = {B: Te € KH}, 为 证 对 Vje XH 有 {f > a} € 多 , 只 要 注意 到 


Tf>a} 一 im T inf{1,n(f 一 a)+}. 


. 设 一 个 系统 由 子 系统 A 和 B 串联 而 成 , A 和 B 的 失效 时 间 都 服从 (0,9) 上 的 均匀 分 


布 , 且 A 和 B 独立 工作 . 当 系统 失效 时 , 用 新 的 子 系统 来 替换 失效 的 那个 子 系统 , 使 整 
个 系统 重新 工作 . 设 五 和 T2 表示 系统 第 一 次 和 第 二 次 失效 时 间 , 求 五 和 的 联合 
分 布 . 


. 设 如 是 可 测 空间 (2, sg) 上 的 一 列 非 零 有 限 测 度 , 则 存在 有 限 测度 yy 使 得 jn << 
. 设 {unm 立 1 为 (2 好) 上 的 一 串 有 限 测度 , A 为 定义 在 or 上 的 一 个 集 函 且 当 一 oo 


时 , pa(4) 一 A(4) 对 A € 9 一 致 地 成 立 , 证 明 /为 测度 . 


12. 


13. 


14. 


15. 


16. 


17. 


18. 


19. 


20. 
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在 概率 空间 (1, zf,P) 中 , Ai € of,Vi 之 1, 且 P(A;) < co. 车 {4i,1i 之 1} 履 盖 
i 二 1 

A € wyY 无 限 多 次 , 则 P(4) = 0. 


用 控制 收 敏 定理 证 明 : 若 六 6%| < o0, lim os = op los 区 M<eo 则 
n=1 nDPoo 


oo OO 
lim > Qnkbxk 一 > akDbk: 
入 一 De 

天 一 1 k=1 


控制 收敛 定理 中 的 条 件 |Xn| 了, Yn 之 1, 能 否 改 为 EIX%| < ElY|? 


若 v 为 概率 空间 (8, of,P) 上 有 限 符号 测度 , 且 ” 之 P. 试 分 别 用 R-N 定理 和 不 用 
R-N 定理 证 明 : Ye > 0, 存在 5 > 0 当 P(4) <5 时 有 |v(4)| < <. 当然 , 这 一 结论 当 用 
o 有 限 测度 代替 P 时 仍 成 立 . 


(Nikodym 微 商 ) 说 明 以 下 诸 式 的 精确 含义 (可 以 以 (2) 为 例 ), 然后 证 明 : 


(1) d(z + v2) _ dn 十 dv 


dp dp dp 
dy _dgr dn 
Q) 到 = 了 x’ 其 中 vk; 
(3) 岂 dp ~ 其 中 vv 与 上 4 等 价 ( 即 v4 及 4h <<v) 
dh Ad ， 


(以 上 都 假定 所 述 测度 和 符号 测度 为 o 有 限 的 .) 


设 v4 为 (1, 多 ) 上 的 两 个 有 限 测 度 , vy < 才 jw = 十 v. 证 明 : 
(7 ww; 

d d 
G) 若 这 一 户 则 0<F<lae 内, 且 于 = 
设 玉 为 民 上 的 分 布 函 数 , F* 为 已 对 应 的 测度 ( 即 Lebesgue-Stieljes 测度 ), 7 为 工 测 
度 . 证 明 F* 之 4 的 充分 必要 条 件 是 FF 在 任 一 有 界 区 间 [4, B] 上 绝对 连续 , 即 对 任意 
e > 0, 存在 5 > 0, 只 要 (ai 加 C [4, 本 ,1 < i < m, 且 两 两 不 交 ,及 (bi 一 4) < 5 
则 


mm 


> (FU — F(ai)) < ee. 


举例 说 明 在 R-N 定理 中 的 oo 有限 条 件 不 能 取消 . 
在 本 题 中 关于 t 的 积分 均 为 Riemann 积分 . 
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(1) 设 |Xi| 过 YEY < oo0, 且 当 t 一 to (t ET) 时 Xi 一 Xio, 则 EE[Xi] 一 EIXio], 其 
中 工 C 及 . 


dX 


(2) 车 在 了 上， 存在 且 区, EY < co, 则 在 上 = to 处 有 





Xt 一 Xto 
t—to 





d rdxt 
五 | X= dt 











(3) 着 在 一 个 有 限 区 间 [os 可 上 ,4 存在 且 er <Y, EY < oo0, 则 在 [a, 相 上 有 
d dX: 
dt Es TJ ar 





(4) 车 Xi 在 有 限 区 间 fa, 上 连续 , 县 |Xt| 二 Y, EY < oo, 则 对 每 个 te [a,9] 有 


fiatf XaP = faP f xeat. 


(5) 车 在 上 面 (4) 中 所 述 条 件 下 对 每 个 有 限 区 间 都 成 立 , 且 |Xildt < 2, EZ < oo， 


则 
[时 dt [XaP= [apf Xidt. 
21. 证 明 : 空间 .名 等 价 于 .ZX = {X Jiame | 全 | < co}, 其 中 X 为 随机 变量 . 
22. 设 X 和 YY 为 离散 型 随机 变量 , 其 概率 函数 分 别 为 
pi=P(X=x)>0, gqg=P(Y=%)>0, i=1,2,.., 
证 明 : oo 00 oo 
y Pin 和 于 < 0， 2》 piln 全 之 》 pi(ps 一 人 )2， 
这 1 大 i=l 1 
和 且 等 号 成 立 当 且 仅 当 pi = qi, 1 二 1,2,…, 即 XX 与 Y 同 分 布 . 
提示 : 用 lnzx 在 z=1 处 的 Taylor 展开 


23. 设 X 和 YY 为 连续 型 随机 变量 , 其 概率 密度 分 别 为 了 和 9, 则 





f 
Jsfms >0, 
其 中 5 = {f > 0}. 


24.、，(1) 设 X 和 YY 为 相互 独立 的 随机 变量 , 且 E|X| < co, ElY|<o, 记 和 YY 的 分 布 
函数 分 别 为 下 和 G, 则 





EX+Y|—EX-Y| 全 性 F(w) — F(a} Gu) — G(-w)} du. 
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25. 


26. 


27. 


28. 


29. 


30. 


31. 


人 OOOOOOOOOOOOOOOOO 第 2 章 随机 变量 的 积分 
(2) 设 久 和 YY 为 独立 同 分 布 的 随机 变量 , 且 EIX| < co, 则 

EIX+Y|I>EX-YI, EX+Y|> EXI. ( 安 鸿 志 , 2006) 
设 e1,e2,.… ,en iid, 满足 Elel] = 0, 且 hi,h2,… ,hn 为 实数 . 证 明 : 


i=1 i=1 


E < 2 也 














设 随 机 变量 Xi, X2,… ,Xn iid, 服从 参数 为 1 的 指数 分 布 , 其 次 序 统计 量 为 Xi:。 世 
X2:n < "0 < Xnin. 证 明 : 


1 x 
oD "| < V2/3 . 


设 Xi Xa…… ,Xm iid, 服从 参数 为 1 的 指数 分 布 , 其 次 序 统计 量 为 Xin 所 Xan 忒 
< Xnin; Yi, Y2,.. ,Vn iid, 服从 (0, 1) 上 的 均匀 分 布 ， 其 次 序 统 计量 为 了 :mn < 
Y2:n < 0 < Yn:n. 证 明 : 


1 所 
E |: Xin | < 2/3 ， 


i=1 


(1) 证 明 : 
[Xa — XT 
IF IX, — XI 


(2) 设 £ 为 随机 变量 的 全 体 , 对 X,Y € L, 令 


Xs Xe 


dx Y) = IX—Y| |， 


1 十 |X 一 到 


则 a 为 £ 中 的 一 个 距离 . 由 (1) 知 在 此 距离 下 £ 是 一 个 完备 的 距离 空间 , 并 且 依 
距离 收敛 等 价 于 依 概 率 收敛 . 


(1) 举例 说 明 X 一 义 , a.s. 不 能 保证 E[Xn] 一 EX, 其 中 Xn， XX 均 可 积 . 
(2) 车 Xi 之 0,vn>1, 且 XY, 卫 X 及 EIX] 一 EX, 则 XX. 


证 明 : 对 概率 空间 (8, 妈 ,P) 上 的 任 一 随机 变量 序列 {Xh,n 之 1}, 几乎 处 处 收敛 与 收 
概率 收敛 等 价 的 充分 必要 条 件 是 概率 空间 (人, .x,P) 是 纯 原子 的 . 


在 非 纯 原子 的 概率 空间 上 , 证 明 : 
(1) 在 随机 变量 之 间 无 法 引入 距离 , 使 按 此 距离 收敛 与 几乎 处 处 收敛 等 价 ; 
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33. 


34. 


35. 


36. 


37. 


(2) 有 限 随 机 变量 全 体 构 成 的 空间 无 法 赋 范 , 使 在 此 范 数 下 收敛 与 依 概率 收敛 等 价 . 


. 设 {Xn,n 之 1} 是 有 界 随机 变量 序列 , 证 明 在 随机 变量 等 价 类 中 存在 满足 下 列 条 件 的 
最 小 (最 大 ) 等 价 类 Y (2), 使 对 任意 e > 0, 有 


lim P(Xn >Y+e)=0 (Him P(Xn < 了 -= 0) 
且 Z 声 YY, as., 同时 Y= 2 且 几 乎 有 限 的 充分 必要 条 件 是 Xn 依 概 率 收 敛 . 
(1) 在 定理 2.7.3 中 若 去 掉 {en,n > 1} 可 和 的 条 件 , 问 { Xu} 是 否 as. 收敛 ? 
(2) 车 en 10,X 和 Xn 为 随机 变量 , 且 


>》 P(Xn 一 XI| 之 en) < co， 


n=1 


证 明 X = lim Xn, a.s.. 


车 {Xn,n 之 1} 为 一 致 可 积 随机 变量 族 , 则 


-一 0 (2 一 co)， 
Nigjgn 


ol} sup [Xl 





提示 : 对 任意 随机 变量 UV > 0, 六 >0, 车 U,V 可 积 , 则 对 任意 a > 0, 有 


sup(U,V) < fi U+ J V. 


iw sn 
设 {Xi,i E 了 1} 为 随机 变量 族 , f 为 定义 于 [0, oo) 上 的 实 值 正 可 测 函 数 , 满足 


lim f(z) =00 且 supE[f(Xi|)] < oo， 
z iel 


则 {Xi,i € 了 为 一 致 可 积 . 


(1) 设 概率 空间 (2, x,P) 无 原子 , 则 随机 变量 族 的 一 致 可 积 性 等 价 于 一 致 绝对 连续 
性 . 


(2) 设 {Xi,i € 了 为 (8,Y,P) 上 一 致 绝对 连续 的 随机 变量 族 , {4;,j 之 1} 为 8 的 
原子 , 则 {Xi,ie 了 是 一 致 可 积 的 当 且 仅 当 对 每 个 ; 之 1, 存在 正 数 Mi 使 得 


[Xi(w)| = ai < M;, weAhj. 
设 Xn 一 > X, as., 其 中 Xn 入 为 随机 变量 , 则 对 任意 e > 0, 必 存 在 M(e) >0 使 


了 (sp < uo) >1—e. 
n 之 1 
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38. 


39. 


40. 


41., 
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设 {Xn,n 之 1} 是 一 致 可 积 随机 变量 族 , 则 


E [liminf xn| < liminf E[Xn],，E [msup Xo > lim sup E[X;]. 


有 一 De 


设 {Xn,n > 1} 为 概率 空间 (2,z,P) 上 的 随机 变量 序列 ， 若 对 任意 > 0, 存在 
Ne PIN)<e 在 Ne 上 {Xn} 一 致 地 收敛 于 (一 致 是 指 与 ww 无 关 ), 则 称 X 几 
平一 致 收 伍 于 XX, 记 Xn 一 关 , a.un. (almost uniform). 证 明 Xn 一 XX, a.un. 的 充分 
必要 条 件 为 对 任意 e > 0, 有 


P (Ut 一 XX| > 9 一 0 一 oo)， 


从 而 说 明 aun. 收敛 与 a.s. 收敛 是 等 价 的 . 若 把 P 改 为 一 般 的 测度 , 试问 两 者 之 间 是 
否 等 价 ? 


设 Xi1, 义 2,… ,Xn iid, X1 的 概率 密度 函数 为 


1 


记 KX1:n < 及 2:m < < Xnin 为 X1，… ;Xn 的 次 序 统计 量 . 证 明 E[Xi:n] 和 E[Xn:n] 
不 存在 ， 但 对 了 一 2,3,- 一 1, E[X;:n] 存在 . 


设 X 有 分 布 函数 F, 证 明 : 
(1) E[X+] < ceo 当 且 仅 当 对 某 个 a, 有 
osg F(t))dt < 十 ooi 
(2) 更 精确 地 , 车 a 和 F(a) 为 正 , 则 
J XP sa —logF(a )+/ ( — log F(t))d 
< Fe a 
设 Xi1, 义 2,… ,Xn iid 且 有 有 限 的 二 阶 和 矩 , 证 明 


nP(PG| > en ) 一 0 和 ml max Xk 0. 


1&ken 
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第 3 章 ”乘积 空间 和 随机 范 数 


3.1 二 维 乘积 空间 和 Fubini 定理 


3.1.1 乘积 可 测 空间 


设 2 和 42 为 两 个 集合 , 令 
11 x f2 = {ws (wi, Ww2) : wi € 12;, i= 1,2}, 
称 2 x f2 为 人 与 人 2 的 乘积 ; 21 x (2 到 12 的 映射 zti: 
Ni(W) = wi, WE Xx fy, 


称 为 投影 映射 , wi 称 为 w 的 第 i 个 坐标 , i = 1,2. 
设 AC 人 2 x 人, hw, 表示 4 在 wi 处 的 截 口 , 即 


A 一 {wz : (wi1, w2) €E A}. 
Aw， 是 [2 的 子 集 . 对 固定 的 wi e 2, 若 4, Ai, i EJ, 为 2 x 022 的 子 集 , 则 容易 
验证 : 


ZE 了 i€I i€ET i€I 


0 -0% 9 - 几 


1 1 


(A)w, 一 (Aw,)”, 
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即 截 口 在 集合 的 并 、 交 、 余 运算 下 保持 封闭 . 若 X 是 Qi x [2 到 任 一 空间 中 的 一 
个 映射 , 用 Xu 表示 X 在 wi 处 的 截 口 , 即 定义 在 人 2 上 由 


Kw (W2) = XWw1, Wa) 


来 定义 的 映射 . 

fi x f22 中 的 矩形 定义 为 4 = 41 x 42 = {(wiyt2) : wi E 4it2 € A2}. 和 撼 
形 4=f 的 充 要 条 件 是 A1 = 或 42 = 人 1. 矩形 的 截 口 (Ah1 x 4z)w 按 ae 41 或 
wi € 4 而 分 别 为 4 和 有. 

设 4 和 gp 分 别 是 821 和 [2。 上 的 o 代数 . 若 4; € ,i = 1,2, 则 称 和 矩形 
41 x 42 为 可 测 的 . 容易 验证 21 x 8。 上 所 有 可 测 和 矩形 的 全 体 构成 一 个 半 代 数 . 由 
该 半 代 数 生成 的 代数 是 由 不 交 可 测 和 矩形 的 有 限 和 组 成 . 由 这 个 代数 生成 的 o 代数 
记 为 oh x so6, 并 称 之 为 吗 和 op 的 乘积 o 代数 . 由 此 , 我 们 定义 

定义 3.1.1 可 测 空间 (Qi x 人 [2,44 x 8) 称 为 可 测 空间 (821, 44) 和 (人 2, 98) 
的 乘积 (可 测 空间 ). 

命题 3.1.1 对 于 每 个 固定 的 wi € 人 1, (人 21 x 人 2, 4 x 成 ) 中 的 可 测 集 4 在 wl 
处 的 截 口 4, 是 (人 2, sg02) 中 的 可 测 集 ; 定义 在 (人 x 2,.94 x 909) 上 的 每 个 随机 
变量 X 的 截 口 Xu 是 ({2,.26%) 上 的 随机 变量 . 

证 令 

C= {A: AC Rx fy, Av, € | 

易 见 每 个 可 测 矩 形 属于 %,,, 且 %%， 在 余 运 算 和 可 列 交 、 可 列 并 运算 下 封闭 ， 故 
CG 2 A x Lp. 

设 B 为 任 一 Borel 集 , 由 于 


{Ww2 : Xw (wa) € B}= {wa2: X(w, wa) € B} 
= {w2: (wi,w2) € X  (B)} 
= (XB))w, 
因此 , 由 命题 第 一 部 分 知 (XX-1(B))w, € 26, 即 X 是 (人 2, 204) 上 的 随机 变量 . 8 


车 2 x f22 的 子 集 4 = 2 x hz, 则 称 4 为 2 x f22 中 以 4 为 底 的 柱 集 . 子 
集 类 {Qi x hz : A2 e co8} 是 41 x gz0 中 的 一 个 子 oa 代数 , 它 同 构 于 f22 中 可 测 集 
的 o 代数 o66. 如 果 不 发 生 温 淆 的 话 , 我 们 就 用 o6 来 记 这 个 子 o 代数 . 上 述 命 题 
允许 我 们 用 另 一 种 方法 来 表征 这 个 o 代数 , 即 
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推论 3.1.1 4 x 6 的 子 o 代数 
2 =o{B: Be x 2 Bo 与 wi 无关}. 
证 首先 注意 到 若 BCHAHx (22, Bi 不 依赖 于 2101) 则 必 有 B= fx B», 
Bw = Bo, 由 命题 知 Be 4 x 4 等 价 于 Bo € 9%4. a 


最 后 , 注意 到 4 x cp% 是 包含 内 x 他 上 子 集 o 代数 oh 和 op 的 最 小 o 代 
数 , 即 4 x gp 是 使 投影 映射 ri 和 ra 皆 为 可 测 的 2 x 4 上 的 最 小 o 代数 . 


3.1.2 ”转移 概率 和 乘积 概率 


定义 3.1.2 设 (2;, .24), i = 12 为 两 个 可 测 空间 , 映射 PBj :1 x 吗 一 [0,1 称 
为 (21, 4) 到 (f22, 264) 上 的 转移 概率 (简称 为 81 x 加 上 的 转移 概率 ), 若 

(1) 对 每 个 固定 的 B e 最 , P4(, B) 是 4 可 测 函 数 ; 

(2) 对 每 个 固定 的 wi e 021, PB(wi,:) 是 o46 上 的 概率 . 

例 3.1.1 设 P 是 (人 2,o6) 上 的 概率 , 令 

Pi(wi, B)=P(B), Vw € 1, Be, 

则 P3 是 29 x 66 上 的 转移 概率 , 它 与 wi 无 关 , 即 (122, .4%4) 上 的 概率 可 看 作 转 移 概 
率 的 特例 . < 

例 3.1.2 设 (f2;, 4), i = 1,2, 为 两 个 可 测 空间 , f € 4 /op, 则 


P23(wi, B)= Ig(f(wi)), wie Q, Be 2, 


为 Di x oh 上 的 转移 概率 . 4 

例 3.1.3 新 生 入 学 体检 的 一 个 项 目 是 测量 身高 和 体重 . 用 ( 太 ,W) 表示 某 个 新 
生 的 这 两 个 量 . 身高 和 体重 是 相关 的 , 如 果 一 个 人 的 身高 8 = h, 则 他 的 体重 落 在 
区 间 B= (a 四 中 的 概率 可 以 用 转移 概率 Pi(h, B) 来 描述 . 4 


定理 3.1.1 设 (02;, 4), i = 1,2, 是 两 个 可 测 空间 , Pi 是 (821, 94) 上 的 概率 , P1 
是 2 x sg6p 上 的 转移 概率 , 则 


(在 (fx (2, 41 x 962) 上 存在 唯一 的 一 个 概率 P, 使 


P(A1 x A2) = | Pil(wi, Aa)Pi(dw), Ai€ oh, Az € 0: (3.1.1) 


:DOOOOOOOOOOOOOOO 第 3 章 乘积 空间 和 随机 函数 


(2) 对 定义 在 (人 x 22, 4 x 968) 上 非 负 ( 拟 可 积 ) 的 随机 变量 X, 函数 
Y ln) = [Xu (wa) PYw1, das) (3.1.2) 
是 2 上 满足 
| XdP = 网 Y (wi) Pi(dwi) 
= =|,P 1(dw1) J XK, (Wa) Pl(w1, duw2) (3.1.3) 
的 逐 点 关于 Pi 几乎 处 处 确定 的 非 负 ( 拟 可 积 ) 可 测 函 数 . 


注 在 式 (3.1.2) 和 (3.1.3) 中 关于 关 (wi,w2) 的 截 口 Xw, (wz) 的 积分 常 写 为 
Jo, XGwi; Ww2) PB(wi, dw2), 以 后 我 们 经 常用 这 种 形式 . 
证 (1) 令 
GF = {A1 xx 42 : 41 <E 1， 4> E 2 (3.1.4) 


则 多 为 半 代 数 , 且 (多 ) = 4 x 6%. 由 第 1 章 定理 1.4.3, 只 要 证 明 由 式 (3.1.1) 所 
定义 的 集 函 了 :多 一 [0 具有 oa 可 加 性 且 满 足 P(Q1 x f2) = 工 即 可 .为 此 , 设 了 
为 可 数 下 标 集 , 设 


A1xAs=)> AixAs, Aje wm, Bem, iel,j=1,2, (3.1.5) 
i€T 


其 中 {Ai x A45,i ET 两 两 不 交 . 由 式 (2.2.1), 式 (3.1.5) 等 价 于 


Ta (wi1i)IA,( 1w2) = Tai ?YU1 ) 了 4 (w2). 
i€EI 


上 式 两 边 在 0。 上 按 转移 概率 P3(w1,*) 积分 , 由 于 两 边 非 负 , 故 由 单调 收敛 定理 得 


Ta (wi)PBlw, ho) = [oD Tas Cor) las (ww2) Plwr, das) 
i€I 


一 》 Tai (wi) Pl, A5). (3.1.6) 
i€I 


式 (3.1.6) 两 边 再 在 2 上 按 概率 P; 积分 , 由 式 (3.1.1) 及 单调 收敛 定理 得 


P(Al Xx 42) 一 ] 了 4; (wi1) Pl(w1, A2) Pi(dw:i) 
= | > ,Tai(wa)Pa(wr 人) Pi(diw) 
1 ET 
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= > P(A’ x A3). 
i€T 
另 一 方面 , 由 于 P3(wi,*) 为 tp 上 的 概率 , 所 以 P3(wi, {22) = 1, 从 而 
P(f21 x f22) 一 Pa(aol， {2 ) Pi1 (dawi) 一 网 Pi(dwi) 一 1. 


因此 , 集 函 P 可 以 延 拓 为 m4 x sg6 上 的 概率 且 具 有 唯一 性 . 
(2) 设 关 为 (021x822,s44 x 20%) 上 非 负 随 机 变量 , 对 任意 wi € 821, 截 曲 XX (w2) 
为 (f22, 26) 上 的 非 负 随 机 变量 , 故 Y(w1) 有 定义 . 设 多 由 式 (3.1.4) 定义 , 再 令 


儿 一 {X : X 为 (Q1 x w,h x cg) 上 非 负 有 界 随机 变量 }， 
C={X: 针 E 由 式 (3.1.2) 定义 的 Ylwi)€ m4 且 式 (3.1.3) 成 立 }. 


首先 我 们 推出 . 色 是 儿 类 . 由 于 对 任意 hi € 4, i 二 1,2, 
1, TAix Az (Wi, WwW2) P2(w1, da) 一 74 (wi) Pi(wi, A2) € A ， 
a0, 41x4sdP =P(A1 x 49)， 
fo Pildw) [Tarxaalwr wa) PY, dw2) = [Tas (01) PBlu, Aa) Pi(du) 
二 P(Ai Xx 42)， 


故 ax4s € 926. 取 hi; = 82;, i 二 1,2, 知 1e .和 .由 积分 的 线性 性 知 . 知 中 元 素 的 
线性 组 合 (只 要 有 意义 ) 仍 在 .办 中 . 最 后 设 0 < Xf XX, Xn EM,n>1, 且 有 
界 , 由 单调 收敛 定理 ， 


| X (Ww1, wa) PB(w1, dw2) = lim [ Xn (WwW1, Wo) P23(wi, dw2) 
(22 nO0 {22 
= lim Yn (wi) € A ， 
| XdP= lim | XndP 
(1 x 22 如 一 oo J N11 Xx V2 
= lim fs Pi(dwi) J Xn (1w1, wa) Pl(w1, dus) 
一 f, Pi(dwi ) J X (wi, wo) Pi (wi, diw2), 


故 站 是 .名 类 . 由 函数 形式 的 单调 类 定理 知 , 当 X 为 非 负 有 界 随机 变量 时 结论 成 
立 . 如 果 X 为 非 负 随机 变量 , 由 于 对 非 负 有 界 随机 变量 X= XTIxsn] 等 式 (3.1.3) 
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成 立 , 故 由 单调 收敛 定理 知 式 (3.1.3) 对 非 负 随 机 变量 也 成 立 , 从 而 如 果 针 关于 了 
可 积 , 则 可 测 函 数 Y 关于 Pi 是 可 积 的 , 且 在 2 上 是 几乎 处 处 有 限 的 . 由 此 知 对 几 
平 所 有 的 wi e 人 21, 截 口 X (wo) 是 P3(wi,:) 可 积 的 . 对 拟 可 积 随机 变量 X, 可 分 
解 为 X+ 一 XX-, 又 因为 (X1)w = (Ko (Xn)” 一 (人 -ju 所 以 


Xi 一 (XT) 一 (XT)w) 
从 而 结论 (2) 仍 成 立 . 是 
该 定理 是 微 积分 中 把 二 重 积分 化 为 累 次 积分 的 推广 . 
推论 3.1.2 在 定理 3.1.1 的 假定 下 , 若 久 > 0, 则 
fs XdP =0 <> J Xuw1, wa) Ph(w1, dw2) = 0，a.s. (P1); 
fn, XdP < co < J X (Ww1, wo) Pi (wi, dw2) < 00, a.s. (Pi1). 
这 是 不 证 自明 的 . 
推论 3.1.3 在 定理 3.1.1 的 假定 下 , 在 可 测 空间 (Da, 26) 上 存在 唯一 的 概率 
P2, 使 
P(A2) 一 网 P3(w1, A,) Pi(dwi), vy A 所 pp， 
对 每 个 在 (422, .262,P2) 上 定义 的 非 负 ( 拟 可 积 ) 随机 变量 2， 
Y(w)= J Z(w2) P3(w1i, dw2) 
是 Qi 上 满足 
J Z(wa) Pa(dw2) = f, Y (wi) Pi(dwi) 
的 关于 P1 几乎 处 处 确定 的 4 可 测 非 负 ( 拟 可 积 ) 随机 变量 . 
证 在 式 (3.1.1) 中 令 41 = 人 9, P2(42) = P(f2 x 42); 在 式 (3.1.2) 和 式 (3.1.3) 
中 令 六 (wi,2w2) = Z(w2), 再 由 单调 收敛 定理 可 证 
] Z(w2) dP = f,, Z(w2) Po(diw2). 
最 后 经 简单 验证 即 得 本 推论 . | 


车 转移 概率 P3 不 依赖 于 变量 wi, 例如 可 取 P3 为 (f22, 2464) 上 的 概率 Pz, 由 式 
(3.1.1), 在 (Q21 x f22, 44 x 26%) 上 存在 唯一 的 一 个 概率 P, 使 


P(Ai x A2) = Pi(A1)P2(A2), V Ai € 2, i = 1,2. (3.1.7) 
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定义 3.1.3 由 式 (3.1.7) 定义 的 概率 称 为 P: 和 Ps。 的 乘积 概率 , 记 为 
P= Pi x 了 2; 


称 (2 x f22, 94 x 96,P1 x P2) 为 乘积 概率 空间 , 记 为 (021, ,Pi) x (人 2, 28,P2). 
在 乘积 概率 空间 (f21, of1,P1) x (f22, 8,P2) 上 , 由 定理 3.1.1, 我 们 可 得 如 下 著 
名 的 Fubini 定理 . 
定理 3.1.2(Fubini 定理 ) 设 X 为 乘积 概率 空间 (人 21, 4,P1) x (fy, 06,P2) 上 
的 非 负 ( 拟 可 积 ) 随机 变量 , 则 下 列 各 积分 有 意义 且 相 等 : 


fs XdP = 网 Pi(d2wi) J X (wi, ta2) P2 (dw2) 
一 f, P2 (dw») J X(wW1, wa2) Pi(dwi). (3.1.8) 
证 先 取 了 Pi 及 P3 = Po, 再 取 Pz 及 P94 = P1, 由 定理 3.1.1, 分 别 在 乘积 可 测 
空间 上 构造 乘积 测度 , 显然 它们 是 一 致 的 , 由 式 (3.1.3) 即 得 . I 
推论 3.1.4 设 X 为 乘积 概率 空间 (81, oh,P1) x (22, .2%,P2) 上 的 随机 变量 , 则 
(1) 半 关 于 Pi x Pa 几乎 处 处 为 零 的 充 要 条 件 是 它 的 几乎 每 个 wi 截 口 Xu, 在 
(f22, 964,P2) 上 关于 P。 几乎 处 处 为 零 . 
(2) 若 
上 几 xdp|< oo， 
121XP2 
则 几乎 处 处 确定 的 截 口 Xu 在 (f22, .8,P2) 上 可 积 . 


推论 3.1.5 设 咯 X 鹃 表示 始 x. 吧 关于 P=PixPs 的 完备 化 扩张 , 胡 为 
X62 关于 Pa 的 完备 化 扩张 . 车 了 € 54 x 8, 则 XX,, € 鹃 .又 若 天 >0 或 拟 可 积 , 
则 Fubini 定理 成 立 . 


证 由 定义 ,可取 X' <e sh x 4, 使 P(X 关 X') = 0. 由 命题 3.1.1, Xl € 2%， 
且 对 几乎 所 有 的 wi, P(X 关 X,) = 0, 因此 推论 成 立 . 

在 Fubini 定理 中 , 把 概率 测度 换 成 有限 测度 , 结论 仍 成 立 ， 由 此 , 我 们 有 如 
下 的 结论 . 

定理 3.1.3( 分 部 积分 公式 ) 设 f 和 g 是 有 限 闭 区 闻 [a,85] 上 右 连 续 的 有 界 非 
减 函 数 , 由 f 和 9 产生 的 L-S 测度 仍 分 别 用 f 和 g 表示 , 则 


fas 7)aoo) = FooO- Flo)g(o) — | 


‘097—)df (oe), (3.1.9) 


114 


IOODOOOOOOOOOOOOOOOO 第 3 章 乘积 空间 和 随机 函数 


js f(z—)dg(zx) = f(b)g(b) — f(a)g(a) 一 js g(z—)df(z) 
- > Ag(z)Af(z), (3.1.10) 


a<zrz<b 
其 中 Af(z) = f(x) - f(x—), Ag(z) = 9g(7) — g(7—). 


证 若 f 或 g 为 常数 , 式 (3.1.9) 显然 成 立 , 故 不 失 一 般 性 , 可 设 f(a) = g(a) = 0. 
在 (ao 中 x (a 外 上 , 令 = fxg, 在 式 (3.1.8) 中 分 别 取 六 (2,9) = Toczgy<s} (2; 
及 X(r,Yy) 一 Tacy<rsb}(T, y), 则 


= oxen 
= [| Ta<esvsn (2 9) af(z)ag(y) 
+ | acy<zso (zy) df(z)dg(y) 
= fs fd) + fo 9 —)df(e), 
即 式 (3.1.9) 成 立 . 类 似 地 , 由 分 解 式 
(a,bl x(a,bl={a<rz<y<b}+{a<r=y sb}+{a<y<zr<b} 
可 得 式 (3.1.10) 成 立 . I 
例 3.1.4 设 4 为 非 负 可 测 函 数 , X 为 非 负 随机 变量 , 8(z) = | 4(bdt, 则 
EIS(X = 人 bz)P(X > zjd 
这 是 因为 , 若 记 X 的 分 布 函数 为 F, 则 由 Fubini 定理 得 
EIS(X)] = hs zjdF(z) = 1 1 t) dtdF(z 
= p(t) pf dF(z) = 三 pt) P(X > t)dt. 
在 本 例 中 , 若 取 6(z) = x?, z > 0, 则 对 任意 非 负 随 机 变量 X, 有 
E[X?] = 三 pzZP-ILI1 ~ F(z)dz. 
特别 取 p = 1, 即 得 


EX = fn — F(z)]dz. 4 
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容易 把 乘积 空间 的 概念 推广 到 有 限 个 可 测 空间 的 乘积 . 设 21,… , Du 为 n 个 
集合 , 为 Qi 上 的 o 代数 ,其 中 i=1,.…,n. 记 

A1l x A2 x x An = {wi Wn): wi€E Ai CC ,i=1,..,n)}, 

简 记 II Ai. 

定义 3.1.4 设 (人 2, 9246), i 二 1,… ,nn, 为 n 个 可 测 空间 , 称 由 半 代 数 

CG = {A1x A x x An: Aie sh, i=1,...,n} 

生成 的 o 代数 为 ,1 = 1,… ,n, 的 乘积 o 代数 , 记 为 妃 xx 5h 或 侨民 , 称 
(HI 0 11) 为 (024), 1 二 二 … sn 的 乘积 可 测 空 间 (简称 乘积 空间 )， 


由 归纳 法 , 不 难 把 定理 3.1.1 推广 到 有 限 乘 积 空间 上 . 

定理 3.1.4 设 (05 oh， 1 一 10 为 可 测 空间 ， Pi1 是 (名 ,oh) 上 的 概率 ， Pr-! 
是 开 人 2; x 吹 上 的 转移 概率 , 其 中 上 = 2,… ,n, 则 在 乘积 可 测 空间 ( (0, 11 
上 存在 唯一 概率 P, 满足 对 任意 A; € 4, i = 1,…,n, 有 


P(A x A2 x.::. x A,) 
三 J …], Ta x xAn (Wl , Wn) Pr (wi,.. ; Wn-1, dwn) …， 
xX PB(wi, dw2) Pi(dw1). 


车 X 为 乘积 空间 (I 02, TI 6) 上 的 非 负 ( 拟 可 积 ) 随机 变量 , 则 


i XdP = 


| 上 xX (wi,- ”" , Wn ) JP 一 1(w1,-- ,Wn dwn) :P23(w1, dw2) Pi1(dw1). 


如 果 转 移 概率 Pt: 与 (wi,… ,wx_1) 无 关 , 且 记 Pt-! = Ph, 则 在 乘积 空间 
(IT f2, TI 4) 上 存在 唯一 概率 P, 使 对 一 切 A; € oy, i = 1,… ,n, 有 
i=1]1 i=1 


P(4 x :x An) = Pi1(A1) .Pn(An). (3.1.11) 
由 上 述 定 理 , 我 们 给 出 如 下 定义 . 
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定义 3.1.5 设 (02;,24,Pi), i = 1,…,n, 为 n 个 概率 空间 ， 在 乘积 空间 
(JI f2;, 可 4) 上 由 式 (3.1.11) 定义 的 概率 P 称 为 Pi,.… ,P， 的 乘积 概率 , 记 为 
2=1 i=1 


P=P xP2x...xPa=|1P;, 


称 (站 2, 下 , 下 Pi) 为 乘积 概率 空间 , 记 为 站 (2 ,Pi). 
?一 1 i 二 1 i=1 i=1 


3.2 无 穷 维 乘 积 可 测 空间 和 随机 函数 


设 了 为 任 一 指标 集 (不 必 可 数 ), {(94, .04), t ET} 为 一 族 可 测 空间 , 记 


nr eI:= {wr = (teT): wen,teT)}. 
teT 

当 Q, = ,VtET, 时 ,常用 87 表示 人. 空间 lr 是 研究 随机 函数 (或 随机 过 程 ) 
的 基本 工具 . 如 果 一 个 随机 通 数 在 “时 刻 1”(t eT) 时 用 空间 f2 中 的 一 个 点 ( 称 为 
状态 ) wi 来 表示 , 则 空间 fr 就 是 根据 “时 间 ”t 的 变化 而 得 到 的 所 有 轨道 所 形成 
的 空间 . 通常 情况 下 (如 研究 随机 过 程 时 ) t 可 以 理解 为 时 间 , 而 空间 以 常 取 为 离 
散 空间 或 欧 氏 空间 , 而 且 往 往 不 依赖 于 t. 

由 fr 到 8 中 的 映射 rs rs(w) = ws, 称 为 投影 映射 , 其 中 ws 称 为 第 s 个 坐 
标 . 为 方便 起 见 , 下 面 定义 一 些 记 号 . 设 ScT, 记 


fs 一 1I f2 ws 一 (wei,t € 5), WT = Ww. 
t€ES 


若 JCSCT, 定 义 2s 到 7 的 投影 映射 r? 为 
ny (we) = wi = (wt € J). 
设 4C fr,， 则 4 的 wj 截 口 定义 为 97r\ 中 的 集合 


Awj = {wr\y : (WW Wr) E A}. 
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Or 上 的 函数 Z(w) 的 wj 截 口 为 Zij(wry). 设 J 人 CT, 94 为 0 上 的 o 代数 ， 
teT, Bje Tl %; 称 Bj x fn 为 2r 中 以 Bj 为 底 的 柱 集 . 若 
jEJ 


B=]1[4;, A;em, jey, IJ<o, 
jEJ 


则 称 Bj x fn\y 为 Br 中 以 可 测 矩 形 Bj 为 底 的 柱 集 , 其 中 |J| 表示 集合 J 的 基数 ， 
即 J 所 含 元 素 的 个 数 . 令 


e- {Bix on Bre [I[%*, 了 CT mso (3.2.1) 
i€ET 
其 中 约定 当 T=06 时 ， Bi x Qn\I = f27. 
引 理 3.2.1 由 式 (3.2.1) 定义 的 子 集 族 多 是 Vr 上 的 代数 . 


证 显然 了 及 fr eB. 设 
Gi= Bi, x fn\L, € CG, 1=1,2, T=UJ,, 
则 Ci = (Bi x fnz) x rv, i= 1,2, 故 


C1NMC2 = ((Br, x fn\1) NM (Br, x fn\1)) x fn\1 GE 入， 
CT 一 BI x n\n 所 CG, 
即 多 在 交 运 算 和 余 运 算 下 封闭 , 从 而 多 为 代数 . I 
由 引 理 3.2.1, 式 (3.2.1) 中 的 代数 多 生成 的 o 代数 o(8) 称 为 {94,t ET} 的 


乘积 o 代数 , 记 为 
Zr = II gf. 


teT 
如 果 g4 与 上 无 关 , 即 4 = 9Y, 则 记 97 为 YT 了. 我们 把 可 测 空间 (827, ofr) 称 为 可 
由 定义 容易 验证 , 若 {5;,i e 了 } 是 5 CT 的 一 个 分 割 , 则 可 测 空 间 (Vs ,zs,)， 
ie 了 的 乘积 可 测 空间 


(I ool = ({2s, czs)- 


ZE 了 iET 
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特别 地 , (Vs, xzs) 和 (f2ms, str\s) 的 乘积 可 测 空间 就 是 (27, Vr). 由 命题 3.1.1 知 ， 
车 Ae otr, ScCT, 则 4 的 ws 截 口 4w。eE srs. 车 X 为 乘积 空间 (fr, czr) 
上 的 随机 变量 , 则 X 的 ws 截 口 Xu。e cfr\s. 特别 地 , 当 集 合 4 = Bs x fs， 
Bs C f2s, SCT,S 有 限时 ( 即 4 是 以 Bs 为 底 的 柱 集 ), 则 4 e gtr 的 充 要 条 件 是 
Bs € sYs. 当 给 定 S 时 , 由 柱 集 


Go 一 {Bs x fr\s, Bs € LAs} 
生成 的 og 代数 与 cfs 同 构 , 所 以 我 们 就 用 ps 来 表示 tr 的 子 o 代数 c(Gs) 有 时 
也 记 为 ws x fn\s. 当 5 为 TT 的 可 列子 集 时 ,上面 的 表达 仍 适用 . 
关于 有 限 乘积 空间 上 的 定理 3.1.4, 我 们 自然 希望 能 推广 到 无 穷 维 乘积 可 测 空 


间 中 来 . 由 下 面 的 讨论 知道 这 是 可 行 的 . 先 讨论 T 为 可 数 的 情况 , 不 失 一 般 性 ， 设 
T=N. 


定理 3.2.1(Tulcea) 设 {(2 om > 1} 为 一 列 可 测 空间 , P; 是 4 上 的 
也 一 1 
概率 ， 当 7 之 2 时 ， Pr 1 (wi1,..- , Wn—1, An) 是 II {2; xX Ln 上 的 转移 概率 ， 其 中 
z=1 
oo ud) 五 025 x zh, 则 在 次 op, 上 存在 唯一 的 概率 P, 使 得 对 任意 
?一 n=1 
柱 集 


C= B, x I 2, Bs e TI 
k=nt+l z=1 


有 
PIC) = PY(B,), (3.2.2) 


其 中 Po) 是 (本 02, 了 24) 上 的 一 个 概率 , 满足 
z 一 工 1 一 1 


Pp (B,) = 上 Tp, (Wi sn) PL (0 ,tn 1 dn) 


xX P3(w1, dw2) Pi(dw). (3.2.3) 


证 设 2m -= 百 ws 以 及 


天 一 了 2 十 1 


i=1 


nn 
Y= 人 > 2 : Be ll%, men 
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由 引 理 3.2.1, 多 是 T 2。 上 的 一 个 代数 , 由 概率 扩张 定理 (定理 1.4.2), 我 们 只 需 
n=1 
要 证 明 由 式 (3.2.2) 定义 的 集 函 P 是 多 上 的 概率 . 我 们 分 以 下 几 步 来 证 . 
(1) P 的 定义 是 不 含混 的 . 车 柱 集 C e 多 有 两 种 不 同 的 表示 方法 : 


C= B xDom = Bx Oo)， 


不 妨 设 m <n, 则 Br = Bm x Ji. 由 式 (3.2.2) 和 (3.2.3) ， 


P™(B,) = PP" 已 x II 0 


k=m++l1 


二 网 | TB,, (Wi,* ,Wm ) JI To (wk) 


k=m 二 1 


x P® -1(w, Wn1; dwn) P3(wi, dw2) Pi(dw1) 


二 | … | ITB, (Wi1,**: , Wm) P71 (wi1,. , Wm-1; dwm) 


x PS(wi, dw2) Pi(din) . [I PE (oa ,Wk 1, dwk) 


ki 
= J hh Tp, (wi wm) Pmrl0o ,Wm 1 dm) 
x Pllw1, dwa) Pi (dwi) 
= PO" (Brm), 
即 P(C) 的 值 与 C 的 表示 方法 无 关 . 
(2) 显然 有 P(IL DJ =1 以 及 P(C) el0,1]),vC ew 


(3) 注意 到 上 述 两 条 性 质 , 为 证 P 是 多 上 的 概率 , 只 要 证 明 P 有 o 可 加 性 即 
可 . 这 又 等 价 于 证 明 P 在 6 处 的 连续 性 , 即 若 D; | 人 Dn € 多, n> 1, 则 P(D,)140. 
用 反 证 法 . 若 否 , 则 存在 e> 0 及 Dn J 0 Dne%, 但 P(Dn) 之 ce,Yn>1. 设 


Nn 
Dn= BY x NW), BW eI 
k=1 
必要 时 在 BV) 前 添加 车 于 个 2 与 之 相 乘 以 及 在 Du 与 Du+l 之 间 适 当 重复 若干 
项 BY. 不 失 一 般 性 , 我 们 可 以 假定 N,, = n, 然后 重新 定义 Di, 而 不 改变 原 事件 
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序列 D;, 的 单调 性 及 收敛 于 $8 的 性 质 (例如 , 设 
Di = B x 0Y, D2s= BY x 1W, Ds= Bx 20， 
我 们 可 重新 定义 DD;: 
D’= OxQW, Dy=BY x NY, Ds= (BY x 1) x 2), 
D’ = BY x 0®, Ds = (BY) x fs) x 1®), 
则 在 2 中 ,Be 1, 且 D1) 以 下 简 记 BEY 为 Ba 当 n>m 时 


了 
Bnm DBn 是 指 Bmx [TI 你 2B。 令 
天 一 rm 十 1 


YK) (01, ra we)= TB, (0 , Wn) P21 (wi, ,On ly dwn) 


x PREF1(W1, Why quok+1)， (3.2.4) 


由 定义 B 单调 下 降 , 因此 对 固定 的 (wi1,… ,wx), 非 负 有 界 的 序列 Y(*) (ww1,…… ,wk) 
关于 n 单调 非 增 , 故 当 n 一 00 时 到 有 极限 , 记 为 了 加 (ul ,wk). 由 控制 收 化 
定理 ， 


P(D,) = js Y(D (0) Pi(dw) — | Yo)Pi(dw) > 6 (3.2.5) 
因而 存在 we 2, 使 YD(w9) > 6, 从 而 
YW) (0w9) 之 evn>1. 
但 
YD (w )= 了 (ug ,1w2) Pi(wY, dw2) > €. (3.2.6) 
用 类 似 于 式 (3.2.4) 和 (3.2.5) 相同 的 讨论 方法 知 存 在 w93, 使 
Yi (wh, 8) = | Get 108,203) PIC, wa, diws) > e 


YM (wD ,WR) Fe Vkh<n. 


令 wo = (2w?, 1w3,.…: ) < II fn. 下 面 证 明 Wo 天 A 万 先 证 wo € D1. 由 


n=1 


¢ < YA (w) = {Tes (eh, 1w2) PElwh, duw2), 
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故 存在 1w9， 使 Tp, (1wY, ws) > 0， 即 (0 ) € B,, 但 Di 了 D2, 故 Bi1 XxX {21 之 万 2， 因 
此 w9 € Bi, 由 此 知 wo € Di. 设 上 为 任意 一 个 正 整 数 , 由 
EK YW (8, 机 , WR) 一 Jj, TB ,i (w9, 机 , WR, Wet1) PE 1 (wh, 机 , WR, dk 1), 
故 存在 why E fl 使 (wy wh,whi) € Berl CS Br x Mt1, 因此 
(1w?,.. ' ,WwA) € Bx, 即 对 任意 正 整 数 ， wo € Dx, 于 是 wo € A Dn,. 这 与 A Dn, = 人 
矛盾 . 由 此 证 得 P 为 多 上 的 概率 . 上 
在 Tulcea 定理 中 取 转 移 概率 P?-1 为 (2 过) 上 的 概率 P。 我 们 有 


推论 3.2.1(Kolmogorov) 设 (人 ,sc4i,Pn), n 之 1, 为 一 列 概率 空间 , 则 在 它们 
的 乘积 空间 ( 2, [[ s4) 上 存在 唯一 的 概率 P, 使 对 一 切 n>>1 及 hj € 7， 
n=1 n=1 
l1<j<n, 有 


P n A; x oo 一 TIP;(4;). 
j=1 j=1 


推论 3.2.1 中 的 P 为 乘积 概率 , 记 为 T P。 而 称 
n= 二 1] 


和 oI Il | 


用 一 1 





为 乘积 概率 空间 , 简 记 为 I (0 5944;Pn). 如 果 2, 二 8, sp = of, n> 1, 则 乘积 概 
率 空间 也 记 为 (0%, ,1 , P 1 Pn). 


推论 3.2.2 设 {i,n 之 1} 为 一 列 分 布 函 数 , 则 必 存 在 一 个 概率 空间 (0, wz,P) 
及 一 列 其 上 的 独立 随机 变量 序列 {Xn,n > 1}, 使 得 Xn ~ 也 


(Rw, ~, 首 P,), 在 其 上 定义 随机 变量 X。 如 下 ; 


Xn(z) = xn, 9 之 1， 人 一 (Z1) 722) ER™, 
即 X 是 Re 中 的 一 个 坐标 投影 映射 . 对 任 一 Be 多 , n > 1, 由 乘积 概率 定义 得 


P(Xn EB)=P({z ER™Y: rn € B}) 
= PR”! x B) 
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一 I Pi(R): Pn(B) = Pn,(B), 


k=1 


因此 , X 的 分 布 函数 为 及. 又 对 任意 mn 及 Bi € 多 ,i 二 1,… ,n, 有 


P(X1€ Bi,:.. ,Xn € Bn)=P({r EER: re Bi,.… ,rn € Bn}) 


人 


即 Xi1,.… ,Xn 相互 独立 . 和 
下 面 讨 论 了 为 不 可 数 的 情况 . 
定理 3.2.2 设 {(f2.,24),t € T} 为 一 族 可 测 空间 , 5S 表示 了 的 任 一 有 限 子 集 ， 


= 


Px(Bx), 
1 





则 
g= 人 ws 


SCT,|S|<o0 


是 乘积 空间 Or 上 的 代数 . 若 5 为 工 的 可 数 子 集 , 则 


多 一 (J 85 = hf. 
SCT,|S|&No 


证 首先 证 明 多 为 fr 上 的 代数 , 车 B e 多 , 即 存在 了 的 有 限 子 集 5, 使 
Be hs, 故 B° € ws, 从 而 B° e 多; 再 设 Bi1, Bs e 乡 , 则 存在 了 的 两 个 有 限 子 
集 51 和 So, 使 B; € gps,i=1,2, 取 5S = Si1U Sz, 则 5 仍 为 全 的 有 限 子 集 , 且 
B1, Bo ec oz ,从 而 Bi U Bo € Ya, Bi Bo € Ys, 即 邹 是 一 个 代数 . 


其 次 证 明 多 为 2r 上 的 o 代数 tr. 首先 验证 多 为 o 代数 . 设 Be 多 则 存 

在 了 的 可 数 子 集 5, 使 Be ws, 从 而 Be e Ys; 若 Bn€ ,n>1, 则 存在 T 的 一 

列 可 数 子 集 序列 {5%,n > 1}, 使 得 Bu e cs,,n>1, 取 5S= 5;, 则 5 仍 为 工 的 
也 一 工 


可 数 子 集 , 且 对 一 切 n 有 Be or, 因此 中 Be fs. 由 此 知 多 是 o 代数 . 
n=1 
由 于 对 工 的 任 一 有 限 子 集 有 ex Cc 多 , 所 以 代数 


CG = {Bi x fn : Bre tg, TCT, 如 < o0} 


为 多 的 一 个 子 代数 , 从 而 gr = c( 多 ) C 多 . 另 一 方面 , 若 4 < 多, 则 存在 人 的 可 
数 子 集 5S, 使 Ae az, 但 oz C sr, 故 多 Chr. 因此 多 = 号. | 


123 


概率 论 教程 OQOOOOOOOOOOOO0OO0OOO0O0OD0OO0000. 


推论 3.2.3 (1) 设 多 为 ofr 中 的 可 数 型 子 o 代数 , 则 存在 T 的 可 数 子 集 5， 
使 罗 C ye. (2) 在 可 测 空间 (827, Ar) 上 定义 的 每 个 随机 变量 X 只 依赖 于 可 数 
个 坐标 . 

证 (1) 设 多 =o(An,n > 其 中 4e. 叮 ,m>1 由 定理 3.2.2 知 存在 了 
的 可 数 子 集 5。 使 A & fs 取 S= 曲 S。 则 5 仍 为 的 可 数 子 集 , 且 对 每 个 
n>1, An E23, 从 而 多 cfs. | 

(2) 设 随 机 变量 X e fr， 由 第 1 章 知 及 上 的 Borel 域 多 是 可 数 型 的 , 设 
多 二 ol(Bnyn > 1) (例如 可 设 B, 是 以 有 理 数 7 为 右 端点 , -oo 为 左 端 点 的 左 开 
右 闭 区 间 ) , 故 X-1( 多 ) = ol(X-!1(Bn),n 之 1) 为 2Vr 的 可 数 型 子 o 代数 . 由 结论 
(1) 知 X 只 依赖 于 可 数 个 坐标 . . 

定理 3.2.3( 无 穷 乘积 概率 的 存在 唯一 定理 ) 设 {(2, .24,Pi)t € T} 为 一 族 概 
率 空间 , 则 在 乘积 空间 (f27, zfr) 上 存在 唯一 的 概率 Pr, 满足 : 对 工 的 任 一 有 限 子 
集 Tw 及 Ai1e of,te TN, 有 


Pr ( [hx on, = [| Pi(é:). (3.2.7) 


t€ETN t€ETN 
此 概率 称 为 Pi,t e 工 的 乘积 概率 , 记 为 县 Pi. (fr, 77, PT) = lL (f24, ,Pi) 称 为 
(024, 94,P1), t eT, 的 乘积 概率 空间 . 若 (02h Pi) = (2, 好 ,P), 则 乘积 概率 空间 
简 记 为 (27,.ez7,PT)， 


证 设 工 CT 为 工 的 任 一 可 数 子 集 , 由 推论 3.2.1, 在 乘积 空间 (87., x,) 上 
存在 概率 Pr . 由 定理 3.2.2, 对 任 一 4 € fr, 存在 工 的 可 数 子 集 工 及 AT. € tI， 
使 4= Az. x Bn\z.. 令 

Pr(A) = Pr,(Ar.). (3.2.8) 
往 证 Pr 是 zfr 上 的 概率 . 首先 验证 Pr 是 fr 上 的 集 函 , 即 车 4 有 两 个 不 同 表 
示 法 : 
A= AT. x Wn\T, = As. x ns. (3.2.9) 
其 中 工 和 5. 分 别 为 了 的 可 数 子 集 , 要 证 Pr (47r. ) = Ps.(4s.). 由 式 (3.2.9), 存在 
4Tns。E LAAT.Ns., 使 


AT. = AT.ns. X fr so) 


As. = AT.ns. x fga\T., 
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故 只 要 证 明 
Pr.(An.) = Pr.ns.(AT.ns.) = Ps.,(As.). 


为 此 , 我 们 可 以 证 明 一 个 包含 该 结论 的 一 般 命题 : 基石 CTCT, 聊 和 为 可 
数 , 则 对 一 切 4r es cr, 有 


PT (An) = Pr7, (4 x fn \T ). (3.2.10) 


事实 上 , 令 
HH 一 {Az, : An, 所 AT 且 使 式 (3.2.10) 成 立 }， 


则 . 知 是 包含 x 系 
GC = {A,, XxX: x Asy x rn\sw : SN={s1,." ,85N} CTI,NEN} 


的 入 系 . 又 o( 多 ) = sftr, 从 而 式 (3.2.10) 成 立 . 由 此 知 Pr 是 gh 上 的 集 函 . 


下 面 证 明 Pr 是 概率 . 显然 , P(r) = 1. 若 4 € Yr,n 之 1, 且 两 两 不 交 , 由 定 
理 3.2.2 的 证 明 可 知 , 存在 工 的 可 数 子 集 工 , 使 对 每 个 n> 1, 存在 4 € fr, 使 


An 二 4 x fr\T., nn 之 1. 


由 于 hsn > 1, 两 两 不 交 , 故 hi,n > 1 也 两 两 不 交 , 且 六 A' < hi., 因而 
n=1 


全 人 = 全 人) om) 
-7 (4 小 - Pa 
= 》， Pr(An). 
n=1 
由 式 (3.2.8) 定义 的 Pr 显然 满足 式 {3.2.7), 因此 为 完成 定理 的 证 明 , 只 要 证 明 满 足 
式 (3.2.7) 的 Pr 唯一 即 可 . 但 由 于 以 可 测 和 矩形 为 底 的 一 切 可 测 柱 集 的 全 体 是 生成 


Yr 的 半 代 数 多 , 而 任何 满足 式 (3.2.7) 的 str 上 的 概率 在 多 上 具有 相同 的 值 , 因此 
由 概率 扩张 定理 知 满足 式 (3.2.7) 的 概率 Pr 唯一 . U 
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3.3 习题 


(1) 人 x 9 上 非 空 矩形 Bl x Ba e 4 x 9% 的 充 要 条 件 是 Bl € 吗 , Ba e 42%. 


(2) 若 Xi(wi)Xs(wa) 是 Di xf 上 不 恒 为 零 的 实 值 函 数 , 则 Xi1(w1)X2(tw2) 为 20x 28 
可 测 的 充 要 条 件 是 Xi 为 4 可 测 , i = 1,2. 





. 设 硕 XxX 到 为 oh x 关于 P= Pi x Pz 的 完备 化 ,证 明报 XxX 奴 2D 0 x 8. 
. 设 久 CE Lp, 实数 a,B,7Y 满足 
+ a > -1, py>0， (3.3.1) 
求证 _ 
2 fsa) Izl dF(x) < oo， (3.3.2) 


反之 , 车 对 某 组 满足 式 (3.3.1) 的 (a,B,7Y), 式 (3.3.2) 成 立 , 则 X € Ly. 


. 设 (X,Y7) 及 (Y, 史 ) 为 可 测 空间 , ja 和 vi 为 (X,Y) 上 的 oo 有限 测度 , pz 和 wo 为 


(Y, 多 ) 上 的 oo 有限 测度 . 车 才 ji,m 安 12) 则 wx vz 安 1i Xx kh2, 且 有 


d(w1 x v2) (z y 
d(p1 x Hz) 


.da 
dj2 


) = 4 (a) 


= qn (9). 


. 设 入 为 (R, 光 ( 民 )) 上 的 Lebesgue 测度 , f 及 g 属于 Li(R, 多 (R), 入 )， 则 


(1) (z,t) — f(z —t)g(t) € B(R’) 且 f(z —t)g(t) € Li(R’, B(R’), A x N); 
(2) 令 


， 其 他 ， 
则 fxg € Li(R, BR),N) Nf * gh < Fl :llgllhi; 
(3) 车 g 有 界 , 则 f *g 连续 ; 


一 好 g(t)dt， 车 积分 有 限 
{be )9( 


提示 : (2) 的 证 明 利用 Lebesgue 测度 的 平移 不 变性 , 由 此 证 明 


fs; f(z — gD x 和 (ds dt) = ||fll : llglh. 
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(3) 的 证 明 利 用 当 z 一 xo 时 ， 


上 [f(z —t) — fro — tdt 一 0 


. (Steinhaus 引 理 ) 设 瓦 为 下 的 一 个 Borel 集 , D(E) = {z 一 y: zx,y € EB}. 若 忆 的 


Lebesgue 测度 和 (E) > 0, 则 D(E) 包含 一 个 含 原点 的 开 区 间 . 
提示 : 不 妨 设 A(E) < oo, 记 z+E= {z+y:yeE},-E={-z:re bE), 
F(z) = A(EN(z+TE)), F(z) = I_g* Ig(z), 从 而 F(z) 连续 . 


. (Steinhaus 引 理 的 推广 ) 设 入 为 (RR, 络 (R)) 上 的 Lebesgue 测度 , 4 和 B 为 及 的 两 个 


Borel 集合 ， 令 
D(A,B)= {y—z: yE€ A,z€B}. 


车 A(4) > 0, A(B) > 0, 则 D(4, B) 包含 一 非 空 开 区 间 . 
提示 : 不 妨 设 和 (4) < ce, 和 (B) < oo, 令 F(z) = A 和 (4Nn (z+ B)), 则 


F(x) 二 T_a 米 TB(z). 


由 Fubini 定理 得 (x) 和 (dz) = 和 (4)A(B), 故 存在 x, 使 F(x) > 0. 


. 设 和 9g 为 民 上 非 降 右 连续 函数 , 且 f(-o0) = 0, 9 为 有 界 的 , 则 对 任意 zo e 到, 有 


站 fe)dg(e) = fzo-) Varg — [lo(7-) ~ g(—o0)ldf(e) 
+ fi, lo (to0) -geday 


= f(zo—) Varg — J ,lo(®) ~ 9(~o0)]af (a) 


x0) 


+ fy) 9+o0) — g(af(z) + 5 Af(r)Ag(e) 


ZER 


其 中 Varg = g(+00) 一 9(-oo). 


. 设 2= [0,1], 4 = of{z},z € 8}. 证 明 8 x 8 的 子 集 4 = {(x,z): ze 1} 不 属于 


xu 但 4 及 4 Ex 
设 X 是 定义 在 (2, xz,P) 上 而 取 值 于 [0,1] 的 一 个 随机 变量 ,2 x [0,1] 中 的 子 集 
G(X)={(w,7x): Oz < X(w)} 


称 为 的 下 方 图 形 , 证 明 G(X) 是 zf x 多 (|0,1]) 可 测 的 . 车 入 表示 [0, 1] 上 的 Lebesgue 
测度 , 证 明 EX =P x A(G(X)). 
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11. 在 Fubini 定理 中 ,车 不 假定 jw, XdP 的 存在 , 而 仅 假定 /dPi jo。 XdP2 存在 , 则 
Fubini 定理 不 必 成 立 . 
提示 : 设 2 是 定义 在 (人 2, 44,P1) 上 的 正 随 机 变量 , 且 ,2ZdP1 = +co. 取 人 2 = 
{0,1}, Pz({0}) = P2({1}) = 1/2, 在 乘积 空间 (人 21 x f22, .244 x 68,P1 x P2) 上 定义 随机 
变量 X 如 下 : X(w1,0) = 2Z(w1), XX(wi,1) = —2Z(wi). 

12. 设 随机 变量 X 和 YY 相互 独立 ,p 之 1. 
(1) 若 EX=EY=0, 则 ElX+Yl? > max{E|Xy?,ElY|?}; 
(2) 车 EIX+Yl? < ec, 则 了 XIP < co, ElY|? < co. 


13. 设 王 为 分 布 函数 , 证 明 : 
(1) fe (z+c)— F(z)dz = ci 
(2) 车 下 连续 , 则 [F(z)dF(z) = 1/2. 


14. 设 X 和 YY 为 非 负 随机 变量 , > > 1, 且 


1 
PY >) < 7 fy XdP, Vt>o0. 


用 Fubini 定理 和 Holder 不 等 式 证 明 





ss 人 ) Ee 


rr—1 


15. (广义 Hélder 不 等 式 ) 设 n,m e N， Tn = {1,.… 人， M = { ,mm}, 对 任意 je M, 
6 5; C In, pj 之 1, 对 任意 i EI Mi={jEM:ie5S;}, 且 


— 二 1, viel,. 
JEM; 


对 任意 ie 六 和 Je M, 设 (02i, .4,Pi) 为 概率 空间 , X; € Lp, (fs,, 7 
Ps,), 则 IT X; € Li( (1,, SA, Pi1,) 且 
jEM 


1/p; 
» ,| 厂子 : 
J ] | I[X;l dP < ] | (fs |X;| iaps, ) . (Finner, 1992) 
jEM jEM 1 


16. 在 上 题 中 , 取 m= n, 5S; = 站 p; = 二 nn 一 1， J ) = ((, 4,P), jE In. 记 


DO) = Or ,Po = Pz,. 车 Xi € Ln_1(fs;, 2fs;, Ps;), 7 € Tn, 则 
E Hl < I[( (EIX; | 一 ') 1/(n— D 
j=1 j=1 
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特别 地 , 对 任意 A € fi,,， hi 表示 4 在 Vs 上 的 投影 , J e 1%. 若 存在 B € fi,,_， 使 


1/(n—1) 


[Po ”< [Pe-2(B)] (Finner, 1992) 
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第 4 章 条 件 期 望 和 鞭 序 列 


4.1 条 件 期 望 的 定义 


设 (2, xz,P) 是 一 个 概率 空间 , 4,B < xf 且 P(B) > 0, 则 在 给 定 事 件 B 发 生 
的 条 件 下 , 事件 4 发 生 的 条 件 概 率 定义 为 
P(AB) 
P(B) 
固定 B, 则 由 式 (4.1.1) 定义 的 集 函 P(.|B) 是 (8, .xy) 上 的 概率 , 因此 (8, zx,P(:|B)) 
是 一 个 概率 空间 . 

设 和 是 (2,w,P) 上 的 一 个 随机 变量 , 我们 可 以 讨论 铸 关 于 P(.1B) 的 积分 
问题 . 

定义 4.1.1 若 随 机 变量 X 关于 P(:|B) 的 积分 [ 关 (w)P(dw|B) 存在 , 则 称 它 
是 X 在 给 定 事件 B 之 下 的 条 件 期 望 , 记 为 E[X|B]. 


取 针 = 了 a4,AE.zY, 则 


P(AIB) = (4.1.1) 


人 X(w)P (dwlB) = | Ta(w)P(dwlB) = P(AIB), 
即 为 条 件 概 率 . 因此 在 下 面 我 们 仍 将 致力 于 条 件 期 望 的 研究 , 而 把 条 件 概率 作为 其 
特例 来 处 理 . 
命题 4.1.1 若 X 是 (2,w,P) 上 的 拟 可 积 随机 变量 , B € ox, P(B) > 0, 则 
EIXIB] 存在 , 且 


E[X|B] = ;Js XdP. (4.1.2) 
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证 令 .2 为 (2,oz,P) 上 的 拟 可 积 随机 变量 的 全 体 , 且 
2 = {X: EIXIB] 存在 且 式 (4.1.2) 成 立 }. 


我 们 先 来 证 明 . 放 是 名 类 . 首先 , 由 ElIn|B] = PC2IB) = 1 知 Ig & ,由 期 望 的 

线性 性 知 6 是 线性 空间 , 最 后 若 0 < Xn 1 XX, 由 单调 收敛 定理 即 知 X & 6. 因此 

是 乡 类 .车 Ae sy, 由 

P(AB) 1 

P(B)  P(B) jaadP 

知 Ia € 326, A € 1. 再 由 函数 形式 的 单调 类 定理 知 对 一 切 拟 可 积 随机 变量 结论 

成 立 . i 
为 方便 起 见 , 我 们 把 用 函数 形式 单调 类 定理 来 证 明 的 方法 称 为 常规 方法 . 
在 条 件 期 望 E[XiB] 中 , 考虑 在 由 Be sy 所 生成 的 子 c 代数 多 = {0,B,B°, 0} 

上 条 件 期 望 的 取 值 , 并 令 


EHAa|B = P(A4|B) = 


E[XIS](w) = EIXIB] Ip(w) + E[X|B°] Ip.(w), 
则 易 见 E[X|w] 是 个 具有 两 点 分 布 的 随机 变量 . 由 式 (4.1.2) 知 
人 EIXI 多 dpP = P(B)E[XIB] + P(B°) E[X|B 
= xdap+ 人 xdap= [XdP. 


我 们 把 上 面 的 多 可 测 函 数 EIXI 多 ] 称 为 在 给 定子 o 代数 多 下 随机 变量 X 的 
条 件 期 望 , 其 中 多 表明 集合 B 的 取 值 范围 . 把 上 面 的 结论 再 推广 一 步 , 设 {Bi, Bi < 
,bE 了 为 8 的 一 个 有 限 分 割 , 且 P(Bi) > 0, i e 了 随机 变量 X 的 期 望 存在 . 由 
命题 4.1.1, E[X|Bi], ie 了 , 存在 . 设 儿 =o(Bi,i€ 7 了 ), 定义 多 可 测 的 阶梯 随机 变量 
E[X|YZ](w) = 》 E[X|B;] Ts,(w), (4.1.3) 

i€ET 


则 称 E[XI|G] 为 在 给 定子 o 代数 多 之 下 的 随机 变量 X 的 条 件 期 望 . 在 (4.1.3) 式 
两 边 取 期 望 , 并 注意 到 式 (4.1.2), 我 们 有 


| E[X|YI dP = 2 ,PB) E[X|B,] 
= ), XdP = | XdP. (4.1.4) 
ET 
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在 式 (4.1.4) 中 取 X = I4, A € sf, 则 得 到 全 概率 公式 : 
P(A) = | TadP = 》 P(A4|B;) P(B;). 


i€ET 

例 4.1.1 一 工厂 用 某 种 原料 生产 一 种 产品 , 原料 来 自 | 大 个 不 同 的 地 方 , 第 
i 个 产地 的 原料 所 占 比 率 为 pi, i e IT， 如果 用 第 i 个 产地 的 原料 进行 生产 , 其 平 
均 合 格 品 数 为 a;, 则 该 工厂 用 这 | 大 种 原料 进行 生产 后 , 其 总 平均 合格 品 数 为 这 
| 个 平均 值 的 加 权 平 均 , 权 数 即 为 zi. 在 这 个 例子 中 , 分 割 {Bi,i € 了 即 为 产地 ， 
多 =o(Bi,ie 也 表达 了 产品 由 各 种 不 同 产 地 原料 的 所 有 可 能 组 合 情 况 . 若 以 X 表 
示 产 品 中 的 合格 品 数 , 则 随机 变量 E[XI 多 ] 表达 了 在 各 种 不 同 产 地 原料 组 合 下 合格 
品 数 的 平均 值 . 4 


一 般 地 , 车 试验 有 |I| 个 不 同 结果 {Bi,i e 1}, 以 随机 变量 X 表示 试验 中 我 们 
所 关心 的 一 个 量 , 则 E[X1Bi] 表达 了 在 结果 B; 发 生 之 下 随机 变量 X 的 平均 值 , 而 
E[X|%| 则 表达 了 在 不 同 试验 结果 下 X 的 各 种 平均 值 . 这 就 是 我 们 需 引 入 随机 变量 
EX 多 | 的 原因 , 它 使 我 们 能 全 面 了 解 在 不 同 试验 结果 下 X 均值 的 取 值 情况 . 由 式 
(4.1.4), 我 们 还 发 现 为 求 X 的 均值 , 我 们 可 以 分 两 步 走 . 第 一 步 是 先 求 在 试验 结果 
B; 下 的 平均 值 Qis 第 二 步 再 对 这 些 Qi 求 概率 平均 . 

再 仔细 比较 一 下 X 的 条 件 期 望 EIXI 鲍 (w) 与 X(w) 的 差别 . 我 们 发 现 条 件 
期 望 是 把 XX 在 B; 上 的 值 作 了 一 个 平均 ,然后 把 这 个 平均 值 作为 在 B; 的 每 个 点 
也 上 的 取 值 , 构造 了 一 个 阶梯 随机 变量 . 换 句 话说 , EI[IX|%] 在 名 的 原子 上 把 XX 平 
滑 化 了 . 

以 上 讨论 的 结果 可 以 进一步 推广 到 {Bi es ,ie 了 为 8 的 可 数 分 割 的 场合 
这 里 P(Bi) > 0, iE 1 多 =o(Bi,iE 7. 设 久 为 (80,9Y,P) 上 的 拟 可 积 随机 变量 ， 
则 由 下 式 定义 的 随机 变量 


E[XI](w) = >》 E[X|B:] Lp, (w) (4.1.5) 
ZE 
称 为 在 给 定子 o 代数 多 下 随机 变量 X 的 条 件 期 望 . 车 多 > 0 及 EX < co, 则 由 单 
调 收敛 定理 知 


[EIXIGIdP =B (5 E[X|B:] 总】 


= 》 EIXIBiP(Bi) (4.1.6) 


GE 了 
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= >) XdP = | XdP < oo. 


车 外 拟 可 积 , 则 由 命题 4.1.1 得 





E[XIBi] = DH f; XdP= 


BB (fs Xa -Js XaP) 


= E[X"|Bi] ~ E[X- |B), 


故 (4.1.6) 仍 成 立 . 

以 P< 记 (人 2, 以) 上 的 概率 PP 限制 在 xz 的 子 o 代数 多 上 生成 的 概率 (P 是 
多 上 概率 很 容易 推出 , 请 读者 自 证 之 ). 由 于 EIXI 儿 是 名 可 测 的 , 因此 车 随机 变 
量 X 本 身 就 是 多 可 测 的 , 即 在 多 的 每 个 原子 B; 上 几乎 处 处 (关于 P) 取 常 值 , 则 
E[XI%] 和 XX 是 几乎 处 处 (关于 P*) 相等 的 . 

在 以 上 随机 变量 X 的 条 件 期 望 定义 中 , 我 们 都 假定 了 所 涉及 的 原子 的 概率 为 
正 , 但 在 统计 和 其 他 领域 , 我 们 经 常会 遇 到 在 P(B) = 0 的 情况 下 如 何 定义 X 的 条 
件 期 望 EIX|B] 的 问题 . 例如 , 设 Y 为 连续 型 随机 变量 , 如 何 定义 EIXIY = yj? 为 
此 , 我 们 必须 把 随机 变量 条 件 期 望 的 定义 推广 到 w 的 任 一 子 o 代数 上 . 先 看 一 个 
例子 . 

例 4.1.2 设 (X,Y 了) 为 连续 型 随机 向 量 , X,Y 和 (X,Y) 的 概率 密度 函数 分 别 
为 及 (z), f2(y) 和 f(x,y). 初等 概率 论 给 出 在 给 定 X = z 条 件 下 , 随机 变量 Y 的 条 
件 概率 密度 函数 为 f(y|z) = f(zx,y)/ 用 (x), 故 在 给 定 X = xz 下 ,了 的 条 件 期 望 是 


so) =EYIX = = wy = [Ey 





两 边 乘 以 有 (x) 再 对 > 积分 得 


三。 Z) 户 (z zar= 三， f{x,y)dydz 
一 三 yfo(y)dy = EY, (4.1.7) 


即 求 Y 的 期 望 可 以 分 两 步 走 , 首先 求 出 给 定 和 =z 之 下 了 的 条 件 期 望 ,然后 再 对 
它 作 概 率 平均 . 4 


式 (4.1.6) 和 (4.1.7) 启发 我 们 , 在 关于 随机 变量 X 的 条 件 期 望 的 定义 中 , 最 重 
要 的 是 应 该 保证 X 的 期 望 等 于 其 条 件 期 望 的 平均 . 为 此 引入 如 下 定义 . 
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定义 4.1.2 设 (1,.zY,P) 是 概率 空间 , 多 是 zy 的 一 个 子 o 代数 ,了 是 (2, wz,P) 

上 的 随机 变量 , 且 EY 存在 (不必 有 限 ),P” 是 PP 在 上 的 导出 概率 , 则 YY 在 芭 

下 关于 P* 的 条 件 期 望 , 记 为 E[Y|%], 是 指 满足 以 下 条 件 的 Q 上 多 可 测 函 数 的 等 
价 类 中 的 任 一 个 : 

| BEIY| 殉 dP = | YdP, vBe®. (4.1.8) 


p(B) = 上 YdP, Be®, 


由 Radon-Nikodym 定理 (定理 2.6.3 后 面 的 注 7) 知 


d 
E[lY|Y] = 下 5 
存在 , 且 在 多 可 测 函 数 等 价 的 意义 下 唯一 . 由 式 (4.1.8) 定义 的 等 价 类 中 任 一 成 员 
称 为 是 条 件 期 望 的 一 个 版 本 (version). 


关于 条 件 期 望 , 我 们 提醒 读者 注意 如 下 几 点 : 


(1) 在 定义 中 , 我 们 仅 要 求 随机 变量 Y 是 拟 可 积 的 , 因而 可 以 保证 e(B) 在 必 
上 是 c 有 限 的 , 这 是 因为 


Oo 
yy(B) = YdP= 2 Jinew ivan “oP, 


但 p(B) 未 必 在 子 o 代数 多 上 是 c 有限 的 . 例如 , 取 平 凡 o 代数 多 = {02] 及 
2o(2) = EY = +oo0. 由 此 可 见 , 虽然 Y 是 随机 变量 , 但 E[Y|w| 未 必 是 (0, or,P2) 
中 几乎 处 处 有 限 的 随机 变量 . 当然 , 如 果 假 定 ElY| < co, 则 yp 在 多 上 为 有 限 的 符 
号 测度 , 因而 E[Y| 多 ] 是 几乎 处 处 有 限 的 . 


(2) 如 果 名 是 由 (2,xY,P) 上 的 随机 变量 X 所 生成 的 z 代数 , 即 多 =o(X), 其 
中 多 的 原子 是 {X = x}, x & 及 , 则 我 们 常 把 随机 变量 Y 在 o(X) 下 关于 Pe(X) 的 
条 件 期 望 E[Y|@] 记 为 EY|X], 它 关 于 o(X) 可 测 . 由 定理 2.2.4, 存在 Borel 可 测 函 
数 g, 使 E[Y|IX| = g(X), 对 给 定 的 {X = zj, 条 件 期 望 也 常 记 为 E[Y|X = z| = g(x). 
类 似 地 , 若 多 = o(Xi,ie 7 了 ), 则 E[Y| 久 记 为 E[Y|X;,i e 了 |. 

(3) 在 定义 4.1.2 中 , 我 们 可 以 只 要 求 Y 是 可 积 的 可 测 函 数 ( 即 不 必要 求 Y 几 
乎 处 处 有 限 ), 则 满足 式 (4.1.8) 的 多 可 测 函 数 仍然 存在 且 几 乎 处 处 唯一 确定 的 . 
此 可 以 把 条 件 期 望 的 定义 拓展 为 可 积 的 可 测 函 数 类 上 , 这 时 把 EY 理解 为 JY dP. 
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(4) 本 节 以 及 以 下 各 节 涉 及 条 件 期 望 和 条 件 概 率 时 均 指 对 概率 P* 而 言 , 由 于 
P” 是 P 在 多 上 的 导出 概率 , 故 有 时 也 称 为 “关于 P” 的 条 件 期 望 . 同时 , 为 了 令 
述 简单 起 见 , 常常 省 去 “关于 PY” 或 “关于 P” 等 字眼 . 

(5) 条 件 期 望 E[Y|%] 只 有 当 EY 存在 时 才 有 定义 , 因此 以 后 出 现 条 件 期 望 时 ， 
总 假定 了 EY 的 存在 . 

(6) 在 讨论 条 件 期 望 E[Y|@] 的 几乎 处 处 性 质 时 , 例外 集 均 指 多 可 测 集 , 即 存 
在 和 Ne%, P(N)=0, 在 N° 上 ,EIY| 有 某 种 性 质 . 

(7) 一 般 情况 下 , 条 件 期 望 没 有 显 式 表达 式 ,所 以 为 了 注 明 (或 说 明 ) 某 个 函数 
是 可 测 函 数 了 的 条 件 期 望 时 , 我 们 需要 验证 两 条 : 第 一 , 它 是 多 可 测 函 数 , 第 二 ， 
它 在 多 中 任 一 集合 B 上 的 积分 等 于 Y 在 B 上 的 积分 . 

例 4.1.3 设 = (0,1), Y 为 (0,1) 上 的 Borel 域 (0,1), 入 为 多 (0,1) 上 
Lebesgue 测度 , 令 

X(wW) = 210,14) (Ww) + 3 71/4,1)(W), 


¢=0(X)= {0 0, (0,3). [1)} 


于 是 多 可 测 函 数 只 能 是 在 1/4 处 有 跳 的 阶梯 随机 变量 . 设 了 (w) = w, we (0,1)， 
则 有 


则 


1 5 1 1 
EIYIX] = = 12(X)+ Ts(X)= 7 +-(X—2), as.. 4 
8 8 8 2 


例 4.1.4 设 4 C RR", 称 4 为 对 称 的 Borel 集 , 车 4 € 多 (") 且 对 任意 
(Zl ,Zn) E A 以 及 (1,…,n) 的 任意 置换 (人 ,in), 有 (xi):… ,Ti,) € 4. 
记 多 站 为 多 ("中 对 称 的 Borel 集 的 全 体 , 则 多 89 必 为 多 ("的 一 个 子 o 代数 . 定 
义 在 ("上 的 测度 称 为 是 对 称 的, 若 


H(Ai,. sin) = J(4), vAEe B™, 
Aiiiisin = {Ti (2 € A}. 


现 考 虑 概率 空间 (R", 儿 (",P), 设 P24 是 P 于 多 i 上 的 限制 , 则 P22" 为 鹃 罗 ) 
上 的 对 称 概率 测度 . 设 了 为 多 "可 测 且 ElY| < co, 下 求 E[Y| 有 (1 
令 


1 
Yo(zl ,Tn) 一 Yr ,in )， VY(zZl… , Tn) € R™ 
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其 中 并 是 对 所 有 置换 (it ,i) 求 和 , 则 巧 是 对 称 的 且 为 对 称 的 Borel 可 测 函 
数 . 注意 到 一 个 函数 f 为 多 fm 可 测 当 且 仅 当 f 是 乡 (" 可 测 且 对 称 , 所 以 号 为 
多 可 测 . 由 对 称 性 知 : 对 任意 Be 多 小 , 有 
c 人) C 
fa = YP, 


故 E[Y|819] = Yo, as.. 4 


4.2 条 件 期 望 的 性 质 


本 节 研 究 由 式 (4.1.8) 定义 的 多 可 测 函 数 [YI 多 ] 的 性 质 . 如 果 没 有 特殊 说 明 ， 
我 们 总 假定 X,Y,Z 等 (或 带 下 标 ) 是 给 定 的 概率 空间 (82, x,P) 上 的 随机 变量 , 而 
CEA. 


在 下 面 , 我 们 还 经 常 要 用 到 如 下 的 引 理 (证 明 留 给 读者 作 练 习 ). 
引 理 4.2.1 设 久 和 YY 为 (人 ,sf,P) 上 的 两 个 拟 可 积 随机 变量 , 多 为 生成 7 
的 7 系 , 且 2c 多. 车 对 每 个 Be 多 ,有 
| X dP = 上 Y dP， 
则 X = 了;, a.s. (P). 
定理 4.2.1 设 Y 拟 可 积 , 则 (1) 若 Y eB, 则 El[Y|B] =Y, a.s.(P); 
(2) 车 Y=c, as. (P), 则 E[Y|@] = ec a.s. (P®); 
(3) 车 YY > 0, as. (P), 则 E[Y|@] > 0, a.s. (P®); 
(4) 设 a,5€ R, 车 EX,EY 及 aEX 十 bEY 存在 , 则 
ElaX + bY|G] = aE[X|G| + bE[Y|G), as. (P®); 
(5) E{E[Y|Y]} = EY. 
(6) 条 件 期 望 的 定义 式 (4.1.8) 等 价 于 对 任意 2 可 测 的 非 负 有 界 随机 变量 2Z， 
frzapP = 人 EF 四 zaPs， (4.2.1) 
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证 性 质 (1) ~ (5) 立即 可 由 条 件 期 望 及 期 望 性 质 得 出 , 下 面 证 (6). 设 式 (4.2.1) 
成 立 , 取 2Z = Ip, Be 多 , 立 得 式 (4.1.8); 反之 , 设 式 (4.1.8) 对 多 中 任 一 集合 BB 成 
立 , 首先 设立 > 0, 车 2 = Is, B € %, 则 式 (4.2.1) 成 立 , 由 条 件 期 望 线性 性 知 对 阶 
梯 随 机 变量 2Z, 式 (4.2.1) 成 立 , 再 由 单调 收敛 定理 知 对 一 切 非 负 有 界 随 机 变量 2， 
式 (4.2.1) 成 立 ; 如 果 EY 存在 , 由 性 质 (4), E[YI 多 ] = ETY+ | 多 一 | 多] 从 而 由 
上 面 结 论 推 知 在 此 场合 下 式 (4.2.1) 仍 成 立 . 


定理 4.2.2( 条 件 期 望 的 收敛 性 质 ) 
(7) (条 件 单调 收敛 定理 ) 若 0 < Yh?Y, a.s., 则 


0 < EIY,Y) + EIYIG], as.. 
(8) (条 件 Fatou-Lebesgue 定理 ) 设 X,2 可 积 , 且 对 一 切 n > 1,X < ,a.s., 则 
BE [liminf | | < liminf E[Y|Y], a.s. 
若 对 一 切 n 之 1, Yh < 2, a.s., 则 


limsupE[Yn|E] < E Lim sup Yh, 
N00 人 一 DO 





z| ， a.S.. 


(9) (条 件 控制 收敛 定理 ) 设 X,2 可 积 , 若 区 < 7, 1 Y, as, 或 对 一 切 即 1 
XY, <7Z, 有 HY,—Y,a.s., 则 


ElY,|G] 一 E[Y|G], a.s.. 


证 (7) 显然 对 每 个 n, EB[Y] 存在 , 故 E[Ys|%] 有 定义 . 由 性 质 (3), E[Yn|Z] 关 
于 PS 几乎 处 处 非 降 且 非 负 , 于 是 存在 Ye ,使 E[Yh1B] 1? Y', as., 从 而 对 名 中 
任 一 集合 B, 有 TpE[lYn|B] 1 IsY', a.s.. 再 由 单调 收敛 定理 知 


fy, ElY lap® 1 [Yap®. 
另 一 方面 , 由 定义 式 (4.1.8) 及 单调 收敛 定理 ， 
fs ElYs|Y|dPp® = fi YdP 1 J,YaP = fs ElY|Y]| dp®. 


因为 YY 和 EIY|@] 都 是 多 可 测 函 数 , 由 引 理 4.2.1 知 Y’ = 了 [YY 名, a.s., 即 性 质 (7) 
得 证 . 
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(8) 设 7 之 六 ， 先 考虑 X=0, 记 2 = jnf Ye, n> 1, 则 ZzZ,< 且 
0< Zn 1 ,lim jnf Yi = liminf Ya a.s., 
因此 由 性 质 (3) 和 (7) 有 
lim inf EIYn|Y] > lim FP[Zn|@] 


=E [im inf Y,, 
作 一 CO 





5 ，as (4.2.2) 

车 多头 0, 用 Y= 一 XX 代 蔡 上 面 的 站;, 然后 由 性 质 (4) 和 式 (4.2.2) 即 得 . 至 于 

性 质 (8) 的 第 二 个 结论 , 分 别 用 一 Y 和 一 2 代替 Y, 和 X, 即 由 第 一 个 结论 推出 . 
性 质 (9) 是 性 质 (8) 的 直接 推论 . 


性 质 (7) ~ (9) 说 明了 单调 收敛 定理 、Fatou-Lebesgue 定理 和 控制 收敛 定理 可 
以 推广 到 条 件 期 望 上 来 . 值得 注意 的 是 , 在 单调 收敛 定理 等 三 个 著名 定理 中 , 处 理 
的 是 数列 (随机 变量 的 期 望 ) 的 收敛 性 问题 , 而 条 件 单调 收敛 定理 等 是 处 理 随机 变 
量 序列 的 几乎 处 处 收敛 性 问题 . 


注 1 在 定理 4.2.2 性 质 (9) 中 , 将 条 件 区 2 了 了 改 为 丈 -了 则 结论 不 成 立 
( 见 例 4.2.1). 但 是 , 利用 Markov 不 等 式 我 们 有 如 下 的 结论 : 


ElY,|Y) E; EIY|Y]. 


例 4.2.1 (| < 六 BBIYIO1, as) 设 {Yn,n 之 1} 是 
独立 的 随机 变量 序列 , 满足 


PO% =1) = =1-P(Y, =0), vn>1l. 
显然 , [| < 1 BI] = 1/n 一 0, 于 是 澡 卫 ,0. 注意 到 入 P(Y = 1) = +oo, 由 


BoreLCanteli 引 理 知 P(Y, = 1, io) = 1. 类 似 地 , P(Y, 二 0,1.0.) = 1 因此 , YY, 非 
几乎 处 处 收敛 序列 . 取 子 o 代数 多 二 olYn,n 之 1), 则 


E[{Yn |G] = Yh 0 a.s.. < 


注 2 设 {Xn 之 1 为 一 致 可 积 的 随机 变量 序列 , 且 XX 或 Xn 一 XX， 
则 由 Lp 收敛 定理 知 EIX| 一 E|X|. 但 是 对 sx 的 任意 子 o 代数 多, 并 不 能 推出 
BIXn|G] —— EI[X|G), as.. 反例 如 下 (Romano & Siegel, 1986, p.137): 
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例 4.2.2 ({Xn,n > 1} 一 致 可 积 , X > X -全 ELIXn 贸 一 ELIXIG as) 设 
{Yn, Zn,n 之 1} 是 独立 的 随机 变量 序列 , 满足 : 


P(Y, =1)= -1_P =0), 








1 
P(2 = 12) = m1 P(2 = 0). 


定义 Xn = YZn. 因为 二 P(Zn #0) = Pn -2 < ceo, 所 以 由 Borel-Cantelli 引 理 
得 P(Zn 0, io.) = 0， 于 是 勾 2 0, 进而 有 XX。 2 及 三 0. 记 
GF = 0o(Yn,n > 1). 
注意 到 EEX 一 羡 | = EIXn| = 1/n 一 0, 于 是 由 上, 收敛 定理 知 {X%,n > 1} 一 致 可 
积 , 但 是 E[X,|] > 0, a.s., 这 是 因为 由 下 面 的 引 理 4.2.2 得 
E[X,lY] = ¥, ELZn1Y) = Y ElZn] = Y,,, 
以 及 由 Borel-Cantelli 引 理 可 得 P(Yh = 1,i.0.)=1. < 


引 理 4.2.2 设 Y 和 2 为 两 个 随机 变量 ,满足 E[Y2Z] 和 EY 都 存在 . 若 2 为 名 
可 测 , 则 
ElY ZI%] = ZElYIG], a.s. (4.2.3) 


证 设 2Z=1I4, 4e%, 则 对 任意 Be%, 有 
上 ElIaY|IY| dP = 1 ， YdP= {,, E[Y|Y]dPp® 
= I4 ElYIGldP®. 


由 引 理 4.2.1 知 式 (4.2.3) 成 立 , 再 用 常规 方法 ( 即 函 数 形式 的 单调 类 定理 ) 即 可 证 
明 当 2 为 多 可 测 的 可 积 函 数 时 结论 成 立 , 8 


定理 4.2.3 (条 件 期 望 的 平滑 公式 ) 设 久 和 金 是 oz 的 两 个 子 o 代数 , 且 
C5,Y 和 2 是 满足 ElY2Z] 和 EY 都 存在 的 两 个 随机 变量 , 且 2 为 哆 可 
测 , 则 

E[YZ|@] = E{ZE[Y|@]|G}, as.. 

证 由 引 理 4.2.1, 只 要 证 明 上 面 等 式 两 边 的 镶 可 测 的 两 个 随机 变量 在 只 的 

任 一 集合 B 上 的 积分 相等 即 可 . 设 B € 多 |， 


人 E{ZElY|G] IB} dP = [i ZElY|%] dP 
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= [, ElYZI%l dP = [ YZdP 
= ,EI [YZI@ dPp®, 


其 中 第 二 个 等 号 用 了 引 理 4.2.2, 其 余 由 条 件 期 望 定义 可 得 . 
推论 4.2.1 设 镶 CC 锦 是 巡 的 两 个 子 c 代数 , 若 EY 存在 , 则 
EYIG | = E{EIYIG | |G} = E{ELY|G]|G}, a.s.. 
证 注意 到 名 CcC 金 , 故 EIY|| 也 是 吧 可 测 的 , 从 而 由 条 件 期 望 的 性 质 (1)， 
即 得 本 推论 的 前 半 部 分 . 在 定理 4.2.3 中 取 2 = 1, 即 得 本 推论 的 后 半 部 分 . [ 
注 3 若 久 和 名 没有 包含 关系 , 则 推论 4.2.1 不 必 成 立 . 
鲍 4.2.3 设 2 = {0,1,2}, f= o({0},{1},{2})) = 多 (0)， 


入 二 {9, {0, 1}, {2}, 012}, Go = {9, {0, 2}), {1}, 012}, 
P({0)D) = 1/2, PU(1}) = 1/3, P({2})) = 1/6, EY = Tt2}, 


了 oa = B{EIYIGIG} # E{EIY G6} = 2 Ton + 1 Te). 
条 件 期 望 可 以 用 来 刻画 两 个 子 o 代数 的 独立 性 . 


定理 4.2.4 .cz 的 两 个 子 o 代数 镶 和 多 相互 独立 的 充分 必要 条 件 是 对 每 个 
旬 可 测 的 非 负 随 机 变量 Y, 有 


ElY|%] = EY, a.s.. (4.2.4) 
证 必要 性 设 4 € 外， B 所 Go, Y 一 了 4， 由 Gm 和 Go 的 独立 性 有 
fs E[Ia|G] dP = 上 IadP = P(AB) =P(A)P(B) = | ETTA] dP 多, 


由 引 理 4.2.1 知 BIT4| 金 ] = 了 [Ta, a.s., 由 积分 线性 性 推 知 当 Y 为 饭 可 测 的 阶梯 随 
机 变量 时 式 (4.2.4) 成 立 , 再 由 单调 收敛 定理 及 常规 方法 即 知 式 (4.2.4) 对 鲍 可 测 
的 非 负 随机 变量 Y 成 立 . 


充分 性 设 了 为 贸 可 测 的 非 负 随机 变量 , 且 了 BIY| 哆 ] = EY, a.s., 设 为 名 
可 测 的 非 负 随 机 变量 , 则 由 条 件 期 望 定义 及 引 理 4.2.2, 有 


EXY] = E{EIXY| 哆 ]} = E{X PlY|%]} 
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= ELX EY] = EX . EY. 
由 定理 2.4.6 知 铬 和 哆 独立. 和 
推论 4.2.2 若 X 与 了 独立 ,EY 存在 , 则 
E[Y|X] = EY, a.s.. 
这 是 由 于 Y+ 和 Y- 与 XX 独立, 因而 由 定理 4.2.4 推出 . 


为 把 Hilder 不 等 式 推广 到 条 件 期 望 上 来 , 我 们 需要 如 下 的 条 件 Jensen 不 等 式 . 


引 理 4.2.3 设 必 是 取 8 中 开 凸 区 域 忆 上 的 连续 上 四 (concave) 函数 , 随机 向 
量 (Xi ,Xk) 几乎 处 处 属于 D, 多 为 xY 的 一 个 子 o 代数 , 若 Xi1,… ,Xk 以 及 
从 AT， ,Xk) 可 积 ， 则 


EC :7 , XENG] < ELXI1IG),:.: ,EIXk|G)), a.s.. (4.2.5) 


证 令 y== 9(z1,… ,Zk) 为 开 是 区 域 D 上 的 连续 上 屿 函数, 则 入 = 剖 (为 确定 
起 见 , 这 里 指 右 偏 导数 ), i = 1,.… ,k, 为 Borel 可 测 函 数 . 显 见 由 (Xi ,Xk) € DD， 
a.s., 可 推出 (E[X1|],:… ,EL[Xk|@))) € D, as， 记 Xio = E[Xi|Y], i = 1,:.. ,k, 
w= $(X10,… ,六 j0), 则 过 (Xio,… ,XXko; 60) 的 切 平面 方程 为 

k 
y— Y= SN — Xi0), 
i=1 
且 曲 面 y = V(xz1,.… ,Xxk) 在 该 切 平面 下 方 , 即 


k 
$b(T1,° 2) SC BX1I0,. ,XO) 十 》 Xi(zs — Xi0). (4.2.6) 
记 1 


注意 到 和 入 j,i 二 1,… ,k, 均 为 Borel 可 测 函 数 , 故 9(X10,-… ,Xko) 和 和 (XI0 
Xk0) 均 为 多 可 测 函 数 . 用 随机 向 量 (Xi1,… ,Xk) 代替 式 (4.2.6) 中 的 (zl ,zk) 
并 在 给 定 各 下 求 条 件 期 望 . 由 条 件 期 望 性 质 (1), (3) 和 引 理 4.2.2, 有 


也 [OCXT， 6) 各 ] < $(E[X1|G)], 2 , ELXE|Y]) 
k 
十 2_E{X(X 一 也 [Xi 各])| 各 } 
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十 y Atx 一 了 [| 梦 | 乡 } 
气 
= 9(E[X1|G),... ,ELXk|G), as.. (4.2.7) 
这 里 我 们 假定 了 入 (Xi; 一 E[Xi|]) 的 可 积 性 . 车 其 不 可 积 , 令 
Ani = {w: ED 全 (wj 和 人 = 


用 XiIa,, 代替 Xi， 当 nn 充分 大 时 ，(X114,1,… ,XkIA4ws) E D, a.s.， 因此 对 
(TXTaw) 式 (4.2.7) 成 立 , 然后 再 由 $ 的 连续 性 及 条 件 约 束 收 敛 定 
理 可 推出 当 n 一 oo 时 式 (4.2.7) 仍 成 立 , 从 而 证 明了 引 理 . 上 


推论 4.2.3 若 X 可 积 , 则 


(E[X|IE])+ < E[X+|Y], as., (EI[X|Y))- 入 EX 一 | 多，a.s.. 
证 因为 gz)=2z+ 和 W(x) = zx” 为 下 止 (convex) 函数 , 故 -gz) 和 一 %(z) 
为 上 凸 函数 , 由 式 (4.2.5) 即 得 本 推论 . | 
定理 4.2.5 
(1) (条 件 H6lder 不 等 式 ) 若 p> 工 且 :十 二 三 1 则 


E[|XY||G) < (E[|XI? IG))? (ELIYI? IG) 7 ，as: (4.2.8) 
(2) (条 件 Minkowski 不 等 式 ) 当 p> 1 时 ,有 
(EIIX +YPIE)Y? < (ELIXIPIGN)!? + (EIIYl? IG)™?, as; (4.2.9) 


(3) 当 r > 0 时 , (E[|X|"| 争 ) ”几乎 处 处 是 7 的 非 降 函 数 ; 
(4) (条 件 cy 不 等 式 ) 设 + > 0, 则 


E[IX+YI |Y) < C0,(E[|XI IG + E[|Y| |G]), a.s., 


其 中 
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证 在 引 理 4.2.3 中 , 取 


Pu v= uv 0<a<l; pu v) = (v4v/P)P, p>1. 


则 8(w,v) 和 ww(w,v) 是 连续 上 四 函数 . 类 似 于 引 理 2.7.1 下 面 关 于 无 条 件 H5lder 不 


等 式 , Minkowski 不 等 式 的 证 明 方法 , 可 得 本 定理 (1) ~ (4 的 证 明 . 
推论 4.2.4 设 p>1 及 也 XIz< co, 则 


[EIXIGI | < 了 [2 的，a.s. 


证 在 式 (4.2.8) 中 取 了 = 1 并 注意 到 |E[X| 久 | 和 EXII 例 , a.s. 即 得 . 


推论 4.2.5 设 Xn 一 X,p 之 1,% 是 y 的 一 个 子 o 代数 , 则 
EX 多 2 EIXIG). 
证 利用 XX, 对 和 知 也 jp < co, 了 XIp< oo 因此 
ElE[Xn|Z] 1? < E{ELIX,)?IG)} = EIXnP < oo， 


类 似 地 , E|E[X|@jjP < oo. 又 


[ELXn)G] — ELXIG) < EX — XIG) < (EllXn ~ XE) ?, as.. 


故 
EIELXn|G] — ELX|IY]| < E(E[X, — XI?|G)) = ElXn — Xl? 一 0， 


得 证 本 推论 . 


注 4 推论 4.2.5 的 道 命题 不 成 立 , 反例 如 下 : 设 {Xn,n > 1} 是 iid 随机 变量 序 





列 ,满足 P(X 一 0) = P(X 一 1)=1/2, 子 o 代数 多 = {6,0}, 则 
EIXnlG]| = 3 = EX 
其 中 X = 1/2, 可 见 对 任意 p> 1, 有 ELXn| 酌 < E[XIW]. 但 是 


ElX, ~ Xl? = (3) 记 0. 
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定理 4.2.6 设 Y 是 二 阶 矩 有 限 的 随机 变量 , 多 为 x 的 一 个 子 o 代数 ,2 为 多 
可 测 的 随机 变量 , 且 E[L223] < %, 则 
E(Y — 2) > E(Y — EIYIY))?. (4.2.10) 
等 号 成 立 当 且 仅 当 2Z = E[Y|], a.s.… 
证 首先 ， 


E(Y ~ 2) = E(Y — E[Y|@)) + E(Z — EIYIG])? 
—2E{(Y — ELIYIS])(Z — E[Y|S)}. 


注意 到 2 是 多 可 测 的 , 以 及 


BIZ -BEIY|@]| < oo， 
El(Y ~ EIY|I@)(Z -ErIG)| < oo， 


故 由 引 理 4.2.2， 
E{(Y — EI[Y|S])(2 一 EIY 多 )| 多 } = (2 ~ EIY|G])E{(Y — EIYIY])|IG} = 0, 


因此 
E(Y — 2)° = E(Y — E[Y|%))? + E(2Z ~ E[Y|Y))’. (4.2.11) 


式 (4.2.10) 中 等 号 成 立 显然 等 价 于 2 = E[Y|Y], a.s.. I 
推论 4.2.6 若 EIY2?] < co, 则 


Var(Y) > Var(E[Y|®)). (4.2.12) 
且 等 号 成 立 当 且 仅 当 Y = E[Y|@], a.s.. 
证 在 定理 4.2.6 中 取 2 = EY, 注意 到 EY = E{BIY|B]}, 则 由 式 (4.2.11)， 


Var(Y) = E(Y — E[Y|Y])? + E(EY ~ E[Y|Y)) 
= ElVar(Y|Z)| + Var(E[Y|Y)), 


其 中 Var(Y|%) = E{( 了 一 EIY| 多 )2| 多 }， 称 之 为 给 定名 下 Y 的 条 件 方差 . 由 此 立 得 
推论 . ' 
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式 (4.2.12) 的 直观 解释 是 当 我 们 附加 知道 了 信息 多 后 ,对 了 的 了 解 更 多 了 一 
点 , 因此 波动 的 程度 要 比 不 知道 信息 多 时 小 一 点 . 

在 随机 变量 的 二 阶 矩 存在 时 , 条 件 期 望 有 一 个 很 好 的 几何 解释 . 在 L2( 人 2, wo ,P) 
中 , 设 随机 变量 入,Y e L2, 定义 内 积 < 承 ,Y >= Cov( 针 ,Y). 车 EX=0, 定 义 义 
的 模 || 义 || =< 六, 六 >'/2; 车 EX 关 0, 考虑 鲜 一 EX, 这 相当 于 在 欧 氏 空间 中 把 向 
量 起 点 平移 到 原点 . 为 方便 起 见 , 以 下 我 们 都 假定 随机 变量 入 ,Y 的 均值 为 零 . 若 
义 和 不 相关 , 我 们 称 和 和 YY 正 交 (或 垂直 ). 显然 , 若 随 机 变量 和 和 YY 独立 ， 
则 及 和 YY 必 正 交 . 在 内 积 的 上 述 定义 下 , Za 是 一 个 Hilbert 内 积 空 间 . 随机 变量 
ZZ 作为 Ls 中 一 个 向 量 , 可 以 考虑 Z 在 某 个 子 空间 上 的 投影 . 回忆 一 下 在 R* 中 , 向 
量 Z 在 子 空间 . 上 的 投影 是 指 存在 .NM 中 的 一 个 向 量 站, 它 使 


12- X=min(dZ— YI, Y e.X}. 


在 Za 中 , 车 记 .因为 Lz 中 关于 o( 关 ) 可 测 的 随机 变量 的 全 体 , 则 易 证 .办 是 Lo 中 
的 一 个 子 空间 . 由 定理 4.2.6, 我 们 可 以 把 条 件 期 望 看 成 是 随机 变量 2 在 子 空间 .和 %p 
上 的 投影 . 一 般 地 , 若 多 为 .xf 的 一 个 子 o 代数 , .和 为 关于 多 可 测 的 Ls 中 随机 变 
量 的 全 体 , 则 和 为 Za 中 的 一 个 子 空间 , 而 条 件 期 望 E[Z|B] 可 以 看 成 随机 变量 Z 
在 子 空间 . 知 上 的 投影 . 

条 件 期 望 的 定义 没有 给 我 们 提供 条 件 期 望 EIY| 名 ] 的 显 式 表示 , 在 一 般 情况 下 ， 
也 无 法 给 出 . 但 当 多 是 由 随机 变量 X 或 随机 向 量 (Xi,:… ,Xi) 生成 时 , 有 可 能 给 
出 条 件 期 望 的 显 式 表达 . 这 在 数理 统计 中 是 非常 重要 的 . 由 第 2 章 定 理 2.2.4, 存在 
Borel 可 测 函 数 9, 使 


也 [下 | 入， 0 ,Xn] 一 g(X1, 0 , Xn). 
记 处 == (Xl1,.… ,Xn), 由 第 2 章 定理 2.5.1 (积分 变换 定理 ), 对 任意 B s 多 (”， 
es, EIYIX]dP® = [9(21,* ,zn) P’'(dz1,... ,den), (4.2.13) 


其 中 P* 是 P 在 (Xi ,Xh) 上 的 限制 , P'(B) = PZ(X-L(B)) 是 P? 在 宛 o 上 
的 导出 概率 , 因此 P' 对 应 的 分 布 函数 就 是 随机 向 量 瑟 的 联合 分 布 页 (zl … ,zn). 
另 一 方面 , 由 条 件 期 望 定 义 和 积 分 变换 定理 ， 


anEDP = fp” 
一 |, Y(w)Ip(X(w))P(dw) 
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= E[YIg(X)] (4.2.14) 
= s(n son) Pao dn, dy), 
其 中 下 为 (Xi,… , Xn, 了) 的 联合 分 布 . 因此 对 任意 Be 多 (我们 有 
fi 951 ,zn) Fn(dr1,.. ,den) 


= El[YIp(X)| = hvfs F(dz1,... ,dzn, dy). (4.2.15) 


由 常规 方法 知 , 车 对 一 切 形 如 B = 六 (-oo0,z4] 或 B = 站 (zn,+oo0) 的 集合 ， 
式 (4.2.15) 成 立 , 则 对 一 切 R* 中 的 Borel 集 B, 式 (4.2.15) 仍 成 立 . 因此 只 要 求 出 
g(71,… ,zn) 使 之 对 这 些 待 殊 的 可 测 和 矩形 而 言 式 (4.2.15) 成 立 , 则 9 就 是 我 们 所 求 
的 条 件 期 望 显 式 表达 式 . 这 是 以 下 我 们 能 够 求 出 条 件 期 望 显 式 的 出 发 点 . 

例 4.2.4 设 X1,… ,XX 是 iid 的 随机 变量 , 令 S。= Dx 求 E[X;|Sn]， 
7=1,.…,n. 


解 设 Be 多 ,下 为 XX,… ,Xn 共同 的 分 布 函 数 , 则 由 Fubini 定理 , 对 任意 
7 关上, 由 同 分 布 及 相互 独立 性 , 有 


ise, Xj dP = f ， 国 ZJ17B(Z1 十 … .十 zn) I rz 


= [faelaler + + on) I Fan) 


= | Xx dP, 
{SueB} 


即 BE[XjIfseB}| 与 了 无 关 , 故 对 任意 B € 多， 


ns a Xi dP = > Jis.es, XjdP = js Sn dP, 


由 此 得 到 
EIX;|S",] = ES, 8a.8.. < 
例 4.2.5 设 XX 和 Y 为 iid, 有 共同 的 密度 函数 f, 求 E[X|X 信 Y]. 


解 令 EIXIXA 人 Y=]=g(w), 下 和 五 分 别 为 羡 对 应 的 分 布 函数 和 生存 函 
数 , 则 
P(XAY >%) = [FS1- Fain(u), 
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即 XAY 的 概率 密度 函数 为 2 了 (w)F(w). 由 式 (4.2.15)， 
| go) Fain(dz) = 人 2g(z)7(oJFGc)dz 
= 了 BEIXTxAyr>wl= ELXITx>w] .ELyr>a] 
=F(u) ~ zf(r)dz. 


u 


由 于 两 边关 于 Lebesgue 测度 都 是 绝对 连续 的 , 故 求 导 得 
全 1 oo 
9(W = pi py 了 ZJjfz)dz. 


因此 
XAY 


2 人 YY + = 

2 2F(X AY) JxAY 
例 4.2.6 设 X 服从 参数 入 =1 的 指数 分 布 ,上 > 0, 求 E[X|XA4. 
解 令 EEIX|XAt= w=g(wu), uw > 0. 注意 到 


EIX|XAY]= zf(r)dr, a.s.. 4 


P(XAt>u)=P(X>ut> =e Lo)(u) 1— Fl(w), 


所 以 和 人 A 上 的 分 布 函数 及 在 点 尺 =t 上 处 有 跳 ， 跳跃 度 为 e-!, 已 的 绝对 连续 部 分 对 
Lebesgue 测度 的 R-N 导数 为 e “1rob(o. 


习 一 方面 ， 
EL[XIu,o0)(X 人 入 #)] = E[X1{x>wu)] Tot) (u) 
= To (vu) | Ze “dz = (1+ue “To (u). 


该 函数 在 4=t 时 有 跳 , 跳跃 度 为 -(1 十 tje-t, 其 绝对 连续 部 分 对 Lebesgue 测度 的 
R-N 导数 为 -ve 因此 由 式 (4.2.15) 知 , 对 一 切 w > 0, 有 


[°° gl) rldz) = [gle)e® Io (2)dz + g(t)e 10) (uo) 
= (1 + we "Tow (u). 
由 此 知 上 式 两 边 绝对 连续 部 分 和 跳跃 部 分 分 别 相等 , 故 


—g(u)e “Ton(u) = —ue “To,r) (u), 
g(t)je := (1+t)et. 
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解 之 得 


也， u<t 
gv) = 
1+t, d=t. 


因此 
EI[XIXA 人 相 ==(X 信 TxAt<t} + (1+ t)T{ xAt=t} 
一 (X 人 DT xt} 十 (1 + tT xyt}, a.S.. | 


例 4.2.7 设 铸 和 YY 相互 独立 , X ~ B(2,p),Y 服从 参数 为 1 的 指数 分 布 , 求 
E[Y|X 人 7]. 


解 设 Ely|IXATY 二 j 二 g(w), 则 glu) 至 多 只 有 第 一 类 间断 点 . 注意 到 
P(XAY >u)=P(X>u) P(Y > 
一 To0,0) () +e “p(2— p)To,1) (u) + pre “1,2)(u), 


故 关 和 人 Y 的 分 布 函数 已 在 = 0,1,2 处 分 别 有 (1 一 p)?, 2p(1 一 p)e-! 和 pze-2 的 
跳跃 , 玉 的 绝对 连续 部 分 所 (wu) 有 密度 函数 (ww): 


户 (d) =P(2 一 De “Jon (u) 二 De In,2)(u). 
五 的 纯 跳 跃 部 分 必 (w) 为 
Fz (2) = (1 —p) To,o0)(W) + 2p(1 — p)e Ho0) (u) + pe ?12,00) (ut). 
因此 
J 9 Faz) = ,9 hd + gO — pI-on 
+ 2p(1 -pe genD(o + p2e?2g9(2) 1 0,2) (0). 
注意 到 函数 


E[YIT{ xAy su}] 一 E[lY Tysu}l “ E[T(x>u}] 
= Lo0,0)(W) + p(2— pl + we “To (u) 
十 22(1 十 ue “1,2)(u) 





于 点 久 =0,1,2 处 的 跳 分 别 为 (1 一 p)?， -4p(1 一 p)e-! 和 -3p2e-2. 由 式 (4.2.15)， 
J g(z)P(dz) = ElYI(xaysw]l, ueER. 
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由 该 式 两 边 跳跃 部 分 相等 得 
9g(0)( 一 二 (人 一 2 六 二 9(0) =1, 
2p(1 — p)e 'g(1) = 4p(1 — pe” 一 90)=2， 
pe 2g(2) = 3p2e- 一 > g(2) = 3. 
当 we (0,1)U(1,2) 时 , 再 由 两 边 绝对 连续 部 分 相等 得 
g(u) =u, Yue(0I)U(L2). 
因而 
EI[Y|X AY = = wonv02) (0W) + (+ To (WW) + Ty(w) + Tr2} (2)] 
= ulo0,2 (Wu) + To,1,2}(u). 4 


4.3 条件 独立 性 


由 推论 4.2.2 知 : 车 2 与 X 独立 , 则 E[Z|X] = EZ2, a.s., 一 个 自然 的 问题 是 : 如 
果 仍 假定 2 与 X 独立 , 是 否 有 
ElZ|X,Y] = ElZ|Y], a.s.. (4.3.1) 
回答 是 否定 的 . 
例 4.3.1 设 避 = [0,1], 多 = 多 ([0,1]), 概率 忆 为 各 上 的 Lebesgue 测度 . 令 
Go) = To,ya(W), YWw) = To,s/g(w), XW) = Ta3/4(w), 
则 容易 验证 随机 变量 2 与 XX 是 独立 的 , 但 由 式 (4.1.3) 可 算出 


_2 


BIZIY](w) = 3 


2 
Tro0,3/4](w) = 3Y (w), 


1 
E[Z|X, Y](w) = 57/43/4 (w) + Tlo,1/4a] (Ww) 
1 


一 5X(w) + YY(w), 


因此 E[Z|X,Y] EZ|Y], a.s.. 4 


149 


概率 论 教程 OOOOOOOOOOOOOOO0OO0OOO0OOOOOO0OOODOmt 


人 们 自然 会 问 , 在 什么 情况 下 式 (4.3.1) 成 立 . 为 回答 这 个 问题 , 让 我 们 先 引入 
条 件 独 立 的 定义 . 

定义 4.3.1 在 概率 空间 (fn, .x,P) 中 , zy 的 一 族 子 o 代数 { 久 ,i eT} 称 为 关 
于 子 o 代数 多 条 件 独立 , 若 对 任 一 有 限 事件 族 {Bj;, Bi € 多 ,jE J CT 了 TD, 均 有 


P| (Bs)|= IIP(B;IY), a.s., (4.3.2) 
jEJ jEJ 
或 等 价 地 , 若 对 使 X; 为 多 可 测 的 非 负 随机 变量 的 任 一 有 限 族 {X;,j € J}, 有 
EI] Xe| = J EXG], a.s.. (4.3.3) 
jEJ jeJ 





随机 变量 族 {Xi;,i e 1} 称 为 在 给 定子 o 代数 名 下 条 件 独立 , 若 {o(Xi),ieE 中 0} 在 
给 定 多 下 条 件 独 立 . 


与 独立 性 判别 准则 (定理 1.6.1) 的 证 明 相 仿 , 我 们 可 以 得 到 如 下 条 件 独立 的 判 
别 准则 (证 明 请 读者 自行 补 出 ). 

定理 4.3.1( 条 件 独 立 性 的 判别 准则 ) 若 { 络 ,ie 1} 是 (8, x,P) 中 的 一 族 子 c 
代数 , 且 对 每 个 ?ec 存在 r 系 钨 ,使 任 =c( 纺 )), 则 {9ie T 丰 在 给 定 c 代数 多 
下 的 条 件 独立 性 保证 了 { 饭 ,<E 刀 在 多 下 的 条 件 独 立 性 . 


由 于 {X-I((-co,zj),ze 了 是 生成 ec(X) 的 r 系 , 故 有 

推论 4.3.1 概率 空间 (9, xy,P) 上 的 随机 变量 族 {Xi,i € T} 在 给 定 o 代 
数 多 下 条 件 独 立 的 充分 必要 条 件 是 对 工 的 任 一 有 限 子 集 J 及 对 及 lM 中 任意 点 
(zl ,Z|J|) 有 


P (Ne < le] = 1I[P(X; < x;1%). 
jEJ jE€J 
我 们 再 来 考查 两 种 极端 情形 下 的 条 件 独 立 性 . 如 果 多 为 平凡 o 代数 , 即 多 = 
{9, 2}, 则 在 给 定 多 下 的 条 件 独立 性 相当 于 无 条 件 独立 性 ; 如 果 色 = x, 则 xy 中 
的 任意 两 个 子 集 类 咒 和 吻 在 给 定 多 下 条 件 独立 , 这 是 由 于 车 Bi e 多 , i = 1,2， 
则 有 
P(B1B2|) 一 TB, Bz 一 Tp TB; 一 P(Bi|t4) P(B2|), a.5.. 
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独立 和 条 件 独立 是 两 个 不 同 的 概念 . 例如 随机 变量 序列 {Xnm > 1} 的 独立 性 
在 条 件 下 可 能 会 失去 它们 的 独立 性 ; 另 一 方面 , 相依 随机 变量 序列 在 给 定 条 件 下 可 
能 是 条 件 独 立 的 . 


例 4.3.2 设 {X 之 1} 是 一 列 iid 的 Bernoulli 随机 变量 ， 


其 中 站 > 0. 令 8, = 六 Xi, 我 们 有 
i=1 


P(X; = 1|52 = 1) = 3 i = 1,2. 
但 P(Xi =1,X2=1|S2 =1)=0#P(Xi =1|52 =1):P(X2 =1|S2 =1), 故 Xi 和 
Xo 在 给 定 $2 下 不 是 条 件 独立 . 另 一 方面 , 相依 随机 变量 序列 {5;,n > 1} 在 给 定 
So =k (k= 0,1,2) 时 ， 











P(S' = 1i,S2 = k, S53= 7) 
P(S2 二 有 


=P(S1 =ilS2 = k) .P(Xs = 一 月 


P(Xs = 7 —k,S2 =k) 
PlS; =A) 


= P(S1 = S52 = k):P(S3 = j|S2 = k), 





P(S! =1i, S53 = 让 Sa = k) = 


即 51 与 53 条 件 独 立 ， 同 样 可 以 证 明 对 n > 2, jk > 1，Sn_; 和 Sn 在 给 
定 Sn 下 条 件 独 立 ， 如 果 把 下 标 解 释 为 时 间 , 而 把 随机 变量 {51,… ,5%_1}; {Sn}; 
{Sn+1, Sn+2,"…} 分 别 看 作 过 去 、 现在 和 将 来 时 刻 发 生 的 事件 ， 则 上 述 关系 可 以 形 
象 地 叙述 为 在 给 定 现在 时 刻下 过 去 和 将 来 是 条 件 独立 的 . 随机 过 程 把 它 称 之 为 马 
氏 性 . 4 

利用 条 件 期 望 BIY| 久 ] 可 直观 解释 为 Y 在 多 上 投影 的 想法 , 我 们 也 可 以 从 几 
何 直观 上 来 理解 条 件 独立 和 独立 是 两 个 不 同 的 概念 . 如 图 4.1 中 , 设 荆 和 YY 都 是 
标准 正 态 随机 变量 , 且 相 互 垂直 , 故 X 和 Y 独立 ,但 X 和 了 在 3S=X+Y 上 的 
投影 重合 , 因此 不 可 能 独立 . 在 图 4.2 中 , 设 X,Y 和 2 是 三 个 相互 独立 的 标准 正 
态 随机 变量 , 了 = XX 十 2, W = 了 十 2, 容易 算得 V 与 W 的 相关 系数 py,w = 1/2， 
即 V 和 W 成 60° 角 , 不 互相 垂直 .但 W 和 VV 在 平面 XOY 上 的 投影 分 别 为 Y 和 
X, 它们 互相 垂直 , 即 EIV|X,Y] 垂直 于 EI[W|X,Y], 因此 , V 与 W 在 给 定 o(X,Y) 
下 条 件 独立 . 
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4.1 独立 但 不 条 件 独立 的 几何 直观 4.2 不 独立 但 条 件 独立 的 几何 直观 


下 面 我 们 将 叙述 一 个 关于 条 件 独立 的 重要 结果 , 其 中 多 次 用 到 的 一 个 结果 以 
引 理 形式 单独 列 出 来 , 因为 它 本 身 就 是 一 个 有 用 的 结论 . 
引 理 4.3.1 (让 设 久 和 饭 是 yz 的 两 个 子 o 代数 , 则 
B= {AiN A: Ai EG,i=1,2} 
是 一 个 半 代 数 , 且 o(2) = ca( 帮 WU 哆 ) 


( 亡 设 2 为 c( 强 U 锅 ) 可 测 函 数 ,Y 为 (人 ,syY,P) 上 的 可 积 随机 变量 , 若 对 儿 
中 任 一 集合 4, 有 


| YdP =| ZdP, 
A A 
则 2Z= EYlo(@ UU), as.. 


证 引 理 的 第 一 部 分 可 直接 验证 , 第 二 部 分 用 引 理 4.2.1 即 得 . I 
定理 4.3.2 设 久 , 久 , 镶 是 (1,9Y,P) 上 的 三 个 子 o 代数 , 则 下 列 叙 述 等 价 : 
(名 和 哆 在 给 定 狗 下 条 件 独立 ; 

(2) 对 所 有 A1l e 饭 ， 


P(Ailo(@G UG)) = PA), as:; 
(3) 设 多 为 7 系 , 且 o(2) = 久 , 对 每 个 De ,有 
P(Dlo(@ UL)) = P(DIG), as;; 
(和 设 久 为 7 系 , 且 oo( 纹 ) = 饭 ,1= 1 2 对 每 个 Di se Fi, 有 
P(D1D2|@s) = P(D1|G) P(D2lG), as.; 
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(5) 对 每 个 积分 存在 的 后 可 测 函 数 XX， 
E[Xlo(% U %)] = ELXIG], a.s.. (4.3.4) 
证 (1) 一 > (2) 设 4A; € 久 ,i=1,2,3, 由 条 件 期 望 定义 ， 
fa PioG UG) d=] Id = 14dP 
= [P(A1A2lGs) dP = {P(AGs) P(A2lGs) dp ® 
= 网 E{14, P(AilGs) G3} dP 
= 网 7 P(A1|Gs) dP = fa PAG) dP, a.8.. 


由 引 理 4.3.1 即 得 (2). 
(2) 一 > (1) 设 A; € 入 ,i 一 1,2, 由 条 件 期 望 平滑 性 , 并 注意 到 [4, 是 o( 和 UU 久 ) 
可 测 ， 
P(A1A2|®) = E{E[s 4slo(B UB) IG } 
= EB{Ta, ElIalo(@ LU) IG} 
= E{Ia, P(AlGs) |G)} 
= P(A1G) P(A2|G), as.. 


(2) 一 > (3) 显然 . 
(3) 一 > (2) 令 
GC={A4: Aew,P(Alco(G UG)) = P(AG), a.s.}, 
则 多 < 多 .又 由 概率 的 单调 序列 连续 性 可 验证 多 是 和 系 , 所 以 由 第 1 章 的 定理 
1.3.3 (集合 形式 的 单调 类 定理 ) 得 多 了 和 A(9) = 名 . 
(4) 擂 > (1) 即 为 条 件 独立 性 判别 准则 . 
(5) 一 人 (2) 取 X = 了 4)， 41 E Gi， 立 得 (2). 


(2) 一 > (5) 者 半 = 了 4, 4A1€ 入, 则 (5) 成 立 . 由 常规 方法 即 知 当 X 为 阶梯 随 
机 变量 和 非 负 随 机 变量 时 , (5) 成 立 , 从 而 当 EX 存在 时 (5) 也 成 立 . 


推论 4.3.2 若 随机 变量 Xi 和 X 在 给 定 Xs 之 下 条 件 独立 , 且 E[Xi] 存在 , 则 


EI[Xi|X2, X3] = E[X1|Xs], a.s.. (4.3.5) 
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证 这 是 因为 o(X1) 和 o(X2) 在 给 定 o(Xs) 之 下 条 件 独立 , 故 由 定理 4.3.2(5) 
可 得 . U 
推论 4.3.3 设 钦 ,i 一 1,2,3, 是 of 的 三 个 子 o 代数 ,车 o( 久 KU 的 ) 与 哆 独立 ， 
则 在 给 定 多 下, 久 和 多 是 条 件 独立 的 (同时 也 是 无 条 件 独立 的 ). 如 果 XX 是 任 一 
甸 可 测 的 随机 变量 , 且 EX 存在 , 则 
E[Xlo(® U Ga)| 一 E[X|®l], 8.S.. 
证 关于 无 条 件 独立 性 直接 由 独立 性 定义 得 出 , 下 证 条 件 独 立 性 . 设 A; e 把 ， 
i 二 1,2, 我 们 有 
P(A1A2|G) 一 也 { 卫 [Ta azlc( 饭 U Gs)] |%%} 
= E{IA,E [fas|lo( 徐 | U Ga)| |%%} 
= E{Ia, P(A2)|%} 
= P(A2)ElIa|és] = P(A2|@) P(AG), a.s., 
其 中 第 一 个 等 号 是 条 件 期 望 的 平滑 性 , 第 二 个 等 号 根据 引 理 4.2.2, 最 后 两 个 是 由 于 
入 与 o( 售 口 哆 ) 独立 . 再 由 定理 4.3.2(5) 即 得 推论 . 上 
当 多 和 多 由 随机 变量 Y 和 2 所 生成 时 ,X 和 了 在 2 下 条 件 独立 等 价 于 
E[XIY, 2] = E[X|2]. 设 EI[X|Y,2] 是 Y 和 2 的 线性 函数 ( 当 久 ,Y 和 2 联合 正 态 
时 假设 成 立 ), 上 式 有 一 个 直观 的 几何 解释 . E[X|Y, 2] 可 看 作 随 机 变量 X 在 了 和 
Z 张 成 的 平面 上 的 投影 , 但 此 投影 不 一 定 落 在 了 或 2 上 . 推论 4.3.2 指出 条 件 独 
立 的 几何 语言 就 是 X 在 Y 和 2 张 成 平面 上 的 投影 等 于 X 在 2 上 的 投影 . 而 推论 
4.3.3 则 指出 车 Y 垂直 于 X,2 平面 , 则 关 在 Y 和 2 张 成 平面 上 的 投影 就 等 于 六 
在 Z 上 的 投影 . 这 从 几何 观点 看 是 最 明显 不 过 了 ( 见 图 4.3). 
例 4.3.3 设 {Xn,n > 1} 为 一 列 iid 的 随机 变量 , 5。 = 潜 X;,n>1 设 
i=1 
G, = 0(Sn, Sn41,…), 求 E[Sn1|] n> 2. 
解 ”首先 注意 到 9 一 9 十 XpnH 二 十 RE 及 下 一 5nHe 一 Sn 1 
故 o(Sn, 9n1， -) 一 o(Sn, Xnt1, Xnt2, “1 )， 因此 
ElS,_1|@,| 一 ElSn_1|Sn, Xntl, 及 PP 十 2， ]. 
但 (9。1, 95) 与 (Xnt1,X 了 十 2 " . ) 独立 ， 由 推论 4.3.3 知 ， 当 n > 2 时 ， 


也 [9。1|9 Xn41, Xn42,. :| = ElSn_1|Sn] -并 polsl- a.8.. 
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人 文 隐 2] 


Y 


4.3 Yl 上 (XO2), 故 XX 在 YOZ 上 的 投影 在 2 轴 上 
故 当 n>>2 时 , E[S%_1|@| = (11)S5n,/n, a.s.. 4 


4.4 条 件 概 率 


设 (82, 9,P) 是 概率 空间 , 多 C 为 o 代数 , 对 每 个 4e w, I4 在 给 定名 下 
的 条 件 期 望 E[I4|8| 有 定义 , 且 是 多 可 测 的 . 


定义 4.4.1 设 A4eE ,名 为 9 的 子 o 代数, 则 了 [7 名 | 称 为 事件 4 在 给 定 儿 
下 的 条 件 概率 , 记 为 P(4| 多 ). 


显然 , 对 每 个 B e %， 
| P(4| 多 ) dP® = 上 JidP=P(4mnB)， (4.4.1) 


车 多 = o(X), 对 = {Xt,t ET), 记 六 的 分 布 为 ,并 记 P(A|%) = ElIa|X]a 
5(X) 则 由 式 (4.2.15), 对 任意 B € 多 7， 


| g(x)F(dz) = ElIATB(X)| =P(ANX-!(B)). (4.4.2) 


我 们 再 次 强调 , 由 条 件 期 望 的 定义 , 条 件 概率 P(A|w) 是 多 可 测 的 , 它 是 一 个 
等 价 类 . 该 等 价 类 中 的 每 一 个 函数 称 为 在 给 定 多 下 事件 4 的 条 件 概率 的 一 个 版 
本 , 也 就 是 说 , 条 件 概率 只 能 在 关于 P* 几乎 处 处 的 意义 下 唯一 确定 . 容易 验证 条 
件 概率 有 如 下 性 质 : 
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(1) O< P(AIC) & 1,a.s., P(NQ|G) = 1, a.s.; 
(2) 车 {hn,n > 1} 为 zy 中 一 列 两 两 不 交集 合 , 则 


P 四 4 一 和 PC 人 8.8.， (4.4.3) 


由 于 上 面 两 式 都 是 关于 P* 几乎 处 处 成 立 , 因此 并 不 能 得 出 集 函 P(.| 多 ) : 4 一 
P(4| 多 ) 是 巡 上 概率 的 这 一 结论 . 困难 在 于 (1) 和 (2) 中 零 测 集 分 别 依赖 于 4 和 
序列 {4%,n > 1}, 但 不 可 数 个 零 测 集 的 并 一 般 不 是 零 测 集 , 故 如 果 sx 不 是 可 数 o 
代数 , 则 不 可 能 找到 一 个 公共 的 P* 零 测 集 N, 在 Ne 上 (1) 和 (2) 成 立 . 因此 我 们 
自然 提出 如 下 问题 : 能 否 适当 选择 条 件 概率 的 一 个 版 本 P(-| 多 )(w), 使 上 述 (2) 对 
一 切 {4An,n 之 1} 及 we 0 成立 ? 容易 设想 , 如 果 能 选 出 一 个 具有 这 种 性 质 的 条 件 
概率 的 一 个 版 本 , 则 在 理论 和 应 用 上 会 有 极 大 的 方便 . 以 后 我 们 会 看 到 , 在 一 定 的 
意义 下 , 这 种 选择 确 有 可 能 . 上 述说 明 导 致 如 下 的 定义 . 

定义 4.4.2 定义 在 8 x wt 上 的 函数 EB(.| 多 )(.) 称 为 在 给 定 多 下 的 一 个 正则 条 
件 概率 , 若 

(1) 对 每 个 固定 的 we 92, 定义 在 gf 上 的 集 函 PY(w,.) 全 E(.| 多 )J(w) 是 必 上 
的 概率 ; 

(2) 对 每 个 固定 的 4 e cy, 2 上 的 函数 PY(.,4) 全 PE(4|I 多 )(.) 是 多 可 测 的 ; 

(3) 对 每 个 Ae xY 及 Be ,成 立 如 下 关系 式 : 


f; BAIG) Ww) PY (dw) = P(AN B). 
由 (1) 和 (2), 我 们 得 出 正则 条 件 概率 E(.| 多 )(.) 是 (1, 多) 到 (8, 1) 上 的 转移 
概率 . 由 (3) 知 正则 条 件 概率 P(A|Z) = P(A|%%), a.s., 即 为 条 件 概率 的 一 个 版 本 . 


在 正则 条 件 概率 存在 时 , 我 们 有 如 下 结果 . 


定理 4.4.1 车 P(-|%)(-) 是 在 多 下 的 正则 条 件 概率 , X 是 (2,.x,P) 上 的 一 个 
随机 变量 且 EX 存在 , 则 


EIX|Y|(w) = 网 X(u) EB(dw’ IG)(w), as.. (4.4.4) 


由 于 正则 条 件 概率 是 条 件 概 率 的 一 个 版 本 , 故 只 要 不 发 生 混淆 , 我 们 把 上 式 右 
边 写作 [,X(w) P(dw'|%). 
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证 首先 设 X = 4, A & xy, 则 对 we 0, 有 
E[Ialgl(w) = P(AIG)(w) = P(AIG)(w) 
= | Ta(w’) B(dw’ I)(w), a.s,, 

即 式 (4.4.4) 成 立 . 对 一 般 情况 可 用 常规 方法 得 到 . 有 

本 命题 说 明 在 正则 条 件 概率 存在 时 , 条 件 期 望 可 以 通过 对 正则 条 件 概 率 的 积 
分 得 到 , 就 如 同 在 非 条 件 场合 . 因此 , 正则 条 件 概 率 和 条 件 期 望 之 间 的 关系 变 得 非 
常 简单 . 由 此 很 自然 会 产生 这 样 的 问题 : 什么 情况 下 正则 条 件 概 率 存 在 ? 分 析 正 则 
条 件 概 率 不 存在 的 原因 是 由 于 xy 中 集合 太 多 , 以 致 于 非得 考虑 不 可 数 个 零 测 集 的 
并 . 如 果 x 是 可 数 型 的 og 代数 , 则 我 们 有 可 能 只 需 考虑 可 数 个 零 测 集 之 并 N, 从 
而 在 Ne 上 条 件 概 率 是 概率 , 从 这 点 出 发 , 很 自然 想到 ” 维 欧 氏 空间 中 的 Borel 域 
是 可 数 型 o 代数 , 因此 定义 在 (f,.x,P) 上 的 n 维 随 机 向 量 所 生成 的 o 代数 是 可 
数 型 的 . 利用 这 一 点 , 我 们 可 以 部 分 地 回答 正则 条 件 概 率 是 否 存在 这 一 问题 . 

以 下 设 了 工 为 正 整数 , 和 7 为 Ri 上 的 Borel 域 . 

定义 4.4.3 定义 在 Q x 多 7 上 的 映射 Px(:| 多 )() 称 为 在 给 定 多 下 随机 向 量 
瑟 = (Xi ,Xz) 的 正则 条 件 分 布 (简称 及 的 正则 条 件 分 布 ), 若 它 满足 : 

(1) 对 每 个 we 1, 定义 在 多 上 的 集 函 Px(.| 多 )(w) 是 概率 ; 

(2) 对 每 个 固定 的 Borel 集 Be 多 7, 函数 Px(BIG)() 是 2 上 的 多 可 测 函 数 ; 

(3) 对 每 个 A4e 多 和 Be%, 有 


fs Px(AlG)(w) PY (dw) =P(BNX-1(A)). 


如 果 4A = (—00, 2] = 1 (00,21), ZE RR7, 则 称 


?一 1 
Fx(zlG) = Fx (wlG)(w) SPx((-00, 2]|Y)(w), as. 
为 在 给 定 多 下 随机 向 量 入 的 条 件 分 布 函数 (简称 Fx 是 天 的 条 件 分 布 函数 ). 


由 定义 中 的 (1) 和 (2) 知 入 的 正则 条 件 分 布 是 (2, 多 ) 到 (RT7, 多 7) 上 的 一 个 
转移 概率 , 由 (3) 可 把 它 视 为 在 给 定名 下 局 限 在 c(X) 中 事件 和 -1(4) 的 条 件 概 
率 的 一 个 版 本 . 这 里 首先 要 注意 的 是 c(X) 和 多 都 是 wy 的 子 c 代数 , 但 不 必 有 包 
含 关 系 ; 第 二 , 若 在 给 定 多 下 的 正则 条 件 概率 存在 , 则 对 一 切 4e 名 7, we, 有 


Px(4| 多 )(uw) = P(X AE) (Ww), as.. 
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定理 4.4.2 设 下 是 (1,xY,P) 上 的 工 维 随机 向 量 , 儿 为 好 的 子 o 代数 , 则 在 
给 定 多 下 随机 向 量 XX 的 正则 条 件 分 布 存 在 . 


证 由 于 
o(X)=o(X"(B), Be HB )=o(X (0%,7]), z € R'), 
故 只 要 证 明 在 给 定 多 下 随机 向 量 X 的 条 件 分 布 函数 存在 即 可 . 设 
QT = {rn = (rn ,TnT),n > 1} 
为 R 7 中 有 理 点 的 全 体 . 对 每 个 n, 取 定 条 件 概 率 P(X 系 rn 多) 的 一 个 版 本 , 令 
Amn = {w: P(X Srn|G)(w) < P(X & rmlG)(w)), 


4= Uj Amn, 


Tn>Tm 


其 中 Tn > Tm 是 指 Tnj 之 Tmy! 了 一 1 ,1, 且 存 在 某 个 70 使 得 Tnjo > Tmjo: 因为 
rm < yn 闭 涵 P(X rm 多) < P(X < rn|Z), as 故 P(4) = 0. 再 设 


Bn, = | : dm P(X < rl¥)(w) AP(X < ml ， 


由 条 件 单调 收敛 定理 , 对 每 个 n > 1, 有 P(Bn) = 0, 从 而 P(B) = 0. 类 似 地 , 定义 
C1 = { : lim P(X < rn|G)(w) 天 1 ， 
C2 一 {» : 对 某 个 了 有 ， lim P(X Srn|G)(w) 天 of 

其 中 rw; 4 -co 是 指 rn 的 第 7 个 分 量 单调 下 降 趋 于 一 00, 其 余 分 量 不 变 . 再 记 


Ca = {ww: A rasP(X < rmlY)(w) < 0, 对 某 对 rm < ra, rm, rn € QT), 


C= COU CU COCs. 


也 易 推 知 P(C)==0. 令 N=AUBUC, 则 P(N)=0. 车 we Ne 对 任意 ze RR?， 
设 r， jz, rn EQ7, 定义 


P(X < 2 各 ) = lim P(X < rn|Y), 


158 


/YOOOOOOOOOOOOOOOOO 第 4 章 条 件 期 望 和 拷 序 列 


则 工 元 函数 P(X < .| 多) 是 有 Ri 上 的 分 布 函数 . 设 G 为 Ri 上 的 任 一 分 布 函数 , 定 
义 恨 i x 上 的 函数 Fx: 


G(x), wEN 


(4.4.5) 
P(X < z|G)w), weNs, 


Fx (IG)(w) = | 
容易 验证 , Fx (|%)(w) 满足 定义 4.4.3 中 的 条 件 , 因此 它 是 在 给 定 多 下 随机 向 量 和 X 
的 条 件 分 布 函数 . 有 


推论 4.4.1 在 概率 空间 (R", 多 (),P) 上 , 若 多 为 胞 om) 的 子 o 代数 , 则 正则 条 
件 概率 存在 . 


证 令 天 = (Xi,… ,Xn), 其 中 Xi(z) = zi,1<igsn,zeR", 则 久 是 
(R", 多 (™,P) 上 的 一 个 n 维 随机 向 量 , 故 由 定理 4.4.2 知 站 在 多 下 的 正则 条 件 概 
率 分 布 Px(-| 多 )(:) 存在 . 但 o( 关 ) = 多 (", 故 由 正则 条 件 分 布 的 定义 知 Px (| 多 )(-) 
就 是 在 给 定 多 下 的 一 个 正则 条 件 概率 . 


当 多 由 随机 变量 X 生成 时 , 给 定 X = z, 随机 变量 Y 的 正则 条 件 分 布 常 记 为 
yix(|2) 其 对 应 的 条 件 分 布 函数 记 为 Fyjx (yx) =P(Y < y|X = 72). 


命题 4.4.1 设 (X,Y) 的 联合 分 布 为 已, X 和 了 的 边缘 分 布 分 别 记 为 Fx 和 
Fy, 则 


Foy) = | Fx (Wh) Fx(du), (zy) eR?, 
且 随 机 变量 X 和 YY 独立 的 充分 必要 条 件 是 对 一 切 y € RR， 
Fylx (yx) = Fy(y), as. (P00). (4.4.6) 
证 首先 由 条 件 期 望 定义 及 积分 变换 公式 (定理 2.5.1), 有 
F(zY) =P(X < zw,Y go) 
= [Twa wy) dP 
= Jixes, I_oo(Y) dP 


二 之 o(X) 
xeo TY < YX)dP 


一 o(X) 
ae } Yix (ylX)dP 


= J FYIx (ylu) Fx (du). 
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其 次 , 若 式 (4.4.6) 成 立 , 则 对 一 切 (x,y)) E 及 2 有 
F(x,Y) = a 


一 = 人 本 )Fx(du) = Fx (zx)FYy (y), 


Fylx (ylu)Fx (du) 


即 随机 变量 X 和 Y 相互 独立 . 反之 , 车 XX 和 YY 相互 独立 , 则 对 一 切 (x,y) € R?， 
| > a FY (Px (dw) = Fx(z)FY(y) = F(z,Y) 
J Fy|x(ylu) Fx(du), 


故 由 引 理 4.2.1 得 式 (4.4.6). [| 


命题 4.4.2 设 久 和 YY 为 (8,.f,P) 上 的 两 个 随机 变量 ,g 和 分别 是 恨 和 了 R? 
上 的 Borel 可 测 函 数 , 满足 Elg(Y)| < oo, EIh(X,Y 了 )| < oo, 则 


Elg(Y)IX = = f 9 FYIx(dylz), as, (4.4.7) 
Eh(X,Y)|X = 2 = 人 h(z,y) Fyx (dylz), a.s.. (4.4.8) 
若 随机 变量 X 和 Y 相互 独立 , 则 
E[h(X,Y)|X = 7] = Elh(x,Y)], a.s., 
其 中 Fyjx 为 条 件 分 布 函 数 . 


证 由 常规 方法 , 只 要 对 示 性 函数 来 证 明 上 面 两 式 即 可 . 设 g(y) = (oo, ( 胃 ， 
则 有 


上 Two,0(v) FY x (dv|z) = J Fylx(dvlz) 
= Fyx(b|lz) = P(Y & bIX = 7) 
= Ell_owo(Y)X = 7x], a.s 
即 式 (4.4.7) 对 示 性 函数 成 立 . 设 h(x,y) = 了 oo0,aj(7)1(_oo.g(W) 时 , 由 命题 4.4.1 及 
积分 变换 公式 (定理 2.5.1) 知 , 对 任意 ze 及， 
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一 J Tooa] (Xo,0lY) dP 
=P{(X < min{zx,a},Y &b)= F(zAa,b) 


= _ 0 


= | a 0 J ix (dyle) 
= FX) lao (FYIx (dyle), 
故 由 引 理 4.2.1， 
EX YX = = fa To FYlx (dyl), as 
即 式 (4.4.8) 对 示 性 函数 成 立 . 
车 随机 变量 X 和 YY 相互 独立 , 则 式 (4.4.6) 成 立 . 于 是 由 式 (4.4.8) 得 
E[h(X,Y)|X = 72] = 人 h(x,y) FY (dy) = Elh(z,Y)], as.. 
证 毕 . 上 
由 证 明 不 难看 出 , 当 X 和 了 为 随机 向 量 时 命题 仍 成 立 . 


命题 4.4.2 使 条 件 期 望 的 计算 类 似 于 无 条 件 期 望 的 计算 , 这 在 实际 应 用 中 是 非 
常 方便 的 ， 

例 4.4.1 设 (X,Y) 有 概率 密度 函数 f(x,y), 以 户 (z) 和 fo(y) 分 别 表示 和 和 
Y 的 边际 密度 函数 , 则 对 任意 B € 多 , 有 


P(Y € BIX = zx) = ee dy, a.s.. 


证 令 glz) = f(z,2)/ 有 (x), 我 们 来 证 明 [5 gly|z)dy 是 条 件 概率 P(Y < 
BIX = 2) 的 一 个 版 本 .首先 注意 到 9(ylz) 只 在 户 (z) > 0 时 有 定义 ,但 4 = 
{(z,y) : 及 (x) = 0} 的 概率 为 0, 这 是 因为 


4)= [f(z,ydrdy 


dz 人 Joy)dg 





四 jn 


= |], ,Lo PF)dz =0. 
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对 给 定 的 Be 多 , [,g(y|z)dy 作为 x 的 函数 是 Borel 可 测 的 , 故 对 任意 Ce 多 ， 
| P(Y € BIX = 四 下 (dz) = | IcxB(X,Y)P(dw) 
=P((X,Y)€EC x B)= 人 | f(x, drdy 
= |], f(z )dz | g(y|z)dy 
= (J ?ve)ay) Pilaz). 
于 是 由 引 理 4.2.1, 有 


P(Y e BIX=7)= |/ Ty dy, a.s.. 





特别 取 B = (一 00,j, ye 下, 则 





Fylx(y|7) = J ， | dt, a.s.. 
因此 g(y|z) = f(z,2)/ 有 (x) 可 以 理解 为 在 给 定 XX = zx 下 随机 变量 了 的 条 件 概率 
密度 . 交换 X 与 Y, 令 


f(z,9) 1 
fo(W) {f2(y)>0}; 





h(zly) = 


则 
hap) = De)gla) _ Le) (ula) 


f2(y) A fi(u)g(ylu)du 
这 是 众所周知 的 Bayes 公式 的 翻版 . 若 义 与 Y Ne 则 





9(y|z) = f(y), hlzly) = fi(z). 4 


定理 4.4.3 设 六 = (Xi1,… ,Xn) 为 概率 空间 (82,xY,P) 上 的 n 维 随机 向 
量 ，P?(X)(w, 4) 为 在 o( 久 ) 之 下 关于 P 的 正则 条 件 概率 , 则 存在 Ce 多 ("m) 使 
P*(C) = 0, 其 中 P* 为 P 由 天 在 (R", 罗 () 上 导出 的 概率 测度 , 满足 


P(X)(w, 4)=1， 当 天 (wu) = 时 , 且 zgC， 
其 中 hs = {w: 关 (w) = zx}. 
证 首先 证 明 对 任意 Be 多 ("有 
P(X 0w, X71(B)) = Tx-icB)(wW), as. (P™X)). (4.4.9) 
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事实 上 , 对 任意 De o(X)， 
J Pw, XH(B) PIV (dw) = P(DN XB)) 


= [Tx Cw) PH (dw), 


故 由 引 理 4.2.1 得 式 (4.4.9). 记 Q" 为 R* 中 的 各 分 量 皆 为 有 理 数 的 点 全 体 ， 


Be 一 (a,b] 一 ] (oo Q 一 (ai , Qn )， b= (D ,bn )， 


?一 | 


FG={B: va,beQ"). 
对 任意 B8 e 儿 , 必 存 在 Ne e o( 尽 ), 使 P(NE) = 0, 满足 对 任意 w 4 N。， 


Pt (ww 天 -1(B2)) = Tx-icps) (Ww). 


则 N eo(X) 且 P(N) = 0. 由 于 NeEo(X), 必 存 在 Ce 有 使 N= 久 -1(O), 满 
足 P*(C)=P(N)=0. 当 wgN 时 ， 
PH)(w, X71(B) = Ix-ip(w), VBeE®, 
即 此 时 P*(X)(w,.) 和 工 (w) 限制 于 半 代 数 和 -1(G) 上 相等 . 注意 到 Pr(X)(w,.) 和 
I(w) 为 oc( 义 ) 上 的 概率 , 故 由 概率 扩张 定理 知 
PX)(w, XB) = Ix-iB)(w), VBe®™. 

特别 地 , 当 w 4 N 即 基 (w) = ww 4C 时 , 取 B= {zx}, 由 上 式 得 P”(X)(w,As)=1. 
定理 证 毕 . 用 

利用 定理 4.4.3, 我 们 可 以 给 出 一 个 反例 , 说 明正 则 条 件 概率 可 以 不 存在 . 

例 4.4.2 在 给 定 o 代数 多 下 , 正则 条 件 概率 不 必 一 定 存在 . 以 下 反例 见 Ash 
(1972, 问题 6.6.4) 或 Romano & Siegel (1986, p.138). 

设 8 = [0,1], 多 = 多 ([0,1]), Po 为 2 上 的 Lebesgue 测度 , 将 由 中 的 点 按 
Zz~Yy < 一 y EQ 划分 等 价 类 , 且 在 每 个 等 价 类 中 选取 一 个 代表 元 素 , 所 有 这 些 
代表 元 素 所 组 成 的 集合 万 不 是 Lebesgue 可 测 集 , 且 满 足 : 

Hux(D) 三 sup {Po(B): BCD,Be 多 =0， 
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WwW(D)=inf {Po(B): BOD,BeEe®W}=1, 
其 证 明 见 Romano & Siegel (1986, 例 1.29) 或 徐 利 治 等 (1999, 例 7.2.32). 令 
YA =o(DUEG)= 1{(C1ND)U (CN D') :CC € G}. 
在 zf 上 定义 集 函 P: 
P((GIND)U (CN De) = 5 [Po(C1) +Pu(Ca，vVcu Ca e 多 


则 利用 ja(D) = 0 和 jw*(D) = 1 可 以 证 明 P(4) 与 4 € oY 的 表达 方式 无 关 , 且 P 
是 wf 上 的 一 个 概率 .在 史上 , 设 Ce%， 


P(C)=P(CNMD)YUCND')) = Po(O), 
即 Po =P%.P 在 DD 上 的 值 为 
P(D) =P(QND) UOND) = 了 
下 面 证 明 在 概率 空间 (2, xz,P), 正则 条 件 概率 五 (.| 多 )(.) 不 存在 . 用 反 证 法 , 假 
设 正则 条 件 概率 P(.|%Z)(-) 存在 , 则 对 任意 Ce 多, 有 
上 P(DIG) dP = P(CND)=P(CND) UOND')) 
= Po(C)= [3 dPp®, 


于 是 由 引 理 4.2.1 得 P(D|B) = 1/2, a.s.. 同 理 可 得 P(D°|w) = 1/2, a.s.. 因此 , 存在 
Ni € 多 , P(N1) = 0, 使 得 


BCDIG)w) = 5， 人 (DelG)(w) = 5 VwenNe. 
令 针 (w= 二 ww EQ, 则 多 = ol(X). 由 定理 4.4.3 存在 Na € %@, P(N2) = 0, 使 得 
P({w}E)(w) =1, vweNs. 


记 入 = 和 NiUNz, 则 Ne 多, P(N) =0. 对 任意 固定 的 we Ns, 注意 到 P(|)(w) 为 
2Y 上 的 概率 , 我 们 有 


1= BP({w}O)(w) < FDC)(w) = 3, weD, 
1 = B({w)I)(w) < PDIG)w) = we De 
矛盾 ! 这 说 明 在 给 定 多 下 在 0 x 上 不 存在 正则 条 件 概率 . 2 
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下 面 我 们 来 证 明 著 名 的 Kolmogorov 相 容 性 定理 . 


引 理 4.4.1 设 P(" 是 (R", 多) 上 的 概率 , 则 存在 多 上 的 概率 Pi 及 R*-1 x 
Br 上 的 转移 概率 PRT1i(z1,..- ,Tk-1, Bk), (Z1; ,Tk_1, Bk) € R*-1 Xx < 太一 
2,.… ,n, 使 对 一 切 Be 锡 (), 有 


P(M(B) 一 网 。 J TBp (Zz1, 。。。 , Tn ) Pr (zi, ,Tn 1 dzn) 
义 … P32(x1, dz2) Pi(dzi1), (4.4.10) 
其 中 (Rk, 多 i) = (有 R, 名 ) 为 第 k 个 分 量 的 值 域 及 其 上 的 Borel 域 . 
证 令 
Gr_1 = {BHD x Rr: BETY € BH YD) EA BED x Re k=2,...,n. 


由 推论 4.4.1 知 , 在 RR"x 多 ("上 存在 一 个 在 多 ,1 之 下 的 正则 条 件 概 率 P(-|%_1)(-). 
由 多-_1 的 构造 知 , 对 任意 BW e 多 , P(BWW|G@_1)(-) 内 与 前 n 一 1 个 坐标 有 关 . 
定义 


Pn (zx1, 0 ,Tn_1, Bn) 一 P(R"™-! x Bn|Ehn_1)(z1, 0 , Tn) Bn E 9 
则 由 正则 条 件 概率 的 定义 知 , P?-! 是 RR"-! x 多 ,, 上 的 转移 概率 . 记 PW 在 饭 
Kk 
上 的 限制 为 Pm-D. 设 Bi € Bk, Ck = ]I Bj;,1<k<n, 则 
7 一 1 
J xn, Pr 1(p1, Zn 1 Bn) dPt™— 
一 J xR» P(R™-! x BnlG 1) (ri, ,Ln) dP 
= PW(O,). (4.4.11) 
对 P(, k= 二 1 一 1,… ,2, 重复 以 上 讨论 , 则 有 
[ PE-l(g1,.. ,Zk 1 Bk) dP KTD = PH)(OL), (4.4.12) 
Ck-1xXRx 


以 及 
PU*) (CG) = PK+D(O% x Rrr1), k=1,.…,n—1, 
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其 中 PP 1(zt ,zk_iy Br) 是 及 el x 8 上 的 转移 概率 , 由 下 式 定义 
Pel(z1,... ,Tk-1, BR) 一 了 (了 1 x Bel 1)(21,.* ,Zk), Bk € Bk. 
由 定理 3.1.4 得 
PY (0,) = 加 . 人 Te (zi Tn) PI (gi, ,Tn1, drn) 
x .Ps(z1,dr2) Pi(dr1). (4.4.13) 


由 于 可 测 和 矩形 Cn 的 全 体 是 生成 儿 (") 的 半 代 数 , 因此 由 常规 方法 易 知 对 一 切 B < 
多 (中, 式 (4.4.10) 成 立 . I 
为 建立 Kolmogorov 相 容 性 定理 , 先 给 出 如 下 定义 . 


定义 4.4.4 设 {( 人 ,5244),t ET} 为 一 族 可 测 空间 , 了 为 无 穷 下 标 集 , S C 了 为 
的 任 一 有 限 子 集 . 如 果 对 Ty SG 5, 在 乘积 空间 (fr ,ozw)= I (f2,94) 上 可 
tETN 


定义 概率 Pz、, 满足 : 对 Ty C Tr, C5 的 Tw', 有 


Pry (AT») 二 PT, 区 x II | ， YL4Tv € CT， 


tETw NTNw 
则 称 诸 概率 空间 (Vrv,xzrvw,Pyrvw) 是 相 容 的 . 


以 下 设 Rt C 及 , 鹏 为 直线 及 上 的 Borel 域 多 在 Rl 上 导出 的 o 代数 , 即 
Bi = RiN%. 


定理 4.4.4(Kolmogorov 相 容 性 定理 ) 设 (Ri, 和 好:), t € 了 ,为 一 族 可 测 空间 . 
车 对 7 了 的 任 一 有 限 子 集 Tw, 在 乘积 空间 (Rrv ,多 rm) = 了 (Ri, 好 :) 上 可 定义 概 
率 Prw. 若 这 些 概率 空间 是 相 容 的 , 则 在 (Rr, 多 r) = 用 (Ri 上 存在 唯一 的 概 
率 Pr, 使 对 工 的 任 一 有 限 子 集 Tw, 有 


Pr7 Bry x II Ri: | = Pry (Br ), Vv Bry < BT “ 
tETNTN 


证 我 们 分 两 种 情况 证 明 . 


(iD 先 考虑 了 为 可 数 集 情形 , 不 妨 设 工 = N (自然 数 全 体 ), 记 五 = {1,:… ,n}， 
则 概率 空间 (RL,%81,,,P1,),n 之 1, 是 相 容 的 , 因此 由 引 理 4.4.1 知 它们 决定 了 一 
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转移 概率 序列 Pi1,P3,… , Px-!,.…, 使 对 任意 Be Bn, P2 1(z1,… ,zn-1, Bn) 就 
等 于 在 多 -1 = 多 1,_， x Rn 下 事件 Ri，, x Bn 关于 Pr 的 正则 条 件 概率 . 由 Tulcea 
定理 知 , 在 (Rr, 多 r) 上 存在 唯一 确定 的 概率 Pr, 使 对 每 个 BW e 多 r， 有 


Pr 区 xX II 着 = {Btn) (Z1， 四 , Tn) Pn-1(z1, “0 , Tn-1; dzn) 


hET\In 


义 .Pl(z1, dzo2) Pi(dzi). 


由 引 理 4.4.1 知 上 式 右 端 即 为 Pr (Bt ). 对 证 明定 理 而 言 , 还 需 证 明 对 了 的 任 一 
有 限 子 集 Twy, 有 


Pr (® x II | 一 了 7w ( BT)， Bry 所 LDOT (4.4.14) 


kET\TN 


事实 上 , 对 给 定 的 Ty, 存在 m 使 Ty C ,由 


II we 人 (or II EE [I[ Bi;, 


kET\TN kETm\TN kET\ Lm 


a x II |- 一 P17, (a Tw xX I[ | 一 PTy (BTrw )， 


kET\TN kETn \TN 
其 中 最 后 一 步 是 因为 这 些 概率 空间 是 相 容 的 . 


(ii) 再 设 了 不 可 数 . 任 取 了 的 一 个 可 数 子 集 Tc, 由 情形 (i) 知 在 Bz. 上 存在 
唯一 的 概率 Pr 使 对 任 一 有 限 的 Ty CT, 有 


Pr.|Br,x I R|=Pr(Bry), YBr, € Br,. 
tETe\THN 
Br7. x II Rt. 令 


tET\Te 
Pr(Br) = P7.(Br7.). 
重复 定理 3.2.3 的 证 明 , 可 知 上 式 定义 的 Pr 是 有 意义 的 , 且 是 (RT, Br) 上 唯一 满 
足 式 (4.4.14) 的 概率 . 上 
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设 Xr ={fXteT 为 (2,oz,P) 上 的 一 族 随机 变量 , 则 称 Xz 为 一 个 随机 过 
程 . 特别 地 , 当 (2, wy,P) = (Br, 多 r,Pr) 时 , 定义 随机 过 程 (也 称 为 随机 函数 或 随 
机 元 ) Xz = {Xi,t eT}: 
KzT)= zx, teT, (4.4.15) 
其 中 xz7 = {zi,t eT}€ RT, 则 对 任意 Br e BT, 有 
Pr(X7 E€ Br) 一 Pr(Br). 


若 Tw 为 工 的 有 限 子 集 , 则 称 


Pry(Brv)=Pr [Br x I R|, vBr, ee Zr, 
tET\Tw 
为 Pr 在 多 rw 上 边际 概率 (或 称 为 在 Br 上 的 投影 ). 显然 , 随机 向 量 X7，= 
(Xt ，… ,Xtw) 的 分 布 律 Pxrv 为 Pr 在 多 r、 上 的 边际 概率 . 当 Xz 为 一 般 随机 
过 程 时 , 令 Pxr 表示 了 由 随机 过 程 Xr 在 多 r 上 的 导出 概率 , 即 


Pxr(BT) = P(XTr € Br), Br € Hr, 


则 Pxz (Br) 称 为 随机 过 程 Xx 的 概率 分 布 , 称 {Pxz、,TN CT,|TN| < col 为 XX7 
的 有 限 维 分 布 族 . 易 见 , 它们 是 相 容 的 , 因此 由 Kolmogorov 相 容 性 定理 , Px 由 
{Pxzw ;TN CT} 所 唯一 确定 . 这 一 点 在 研究 随机 过 程 中 有 非常 重要 的 意义 . 从 概 
率 角 度 来 讨论 随机 过 程 XT 的 性 质 时 , X7 与 由 闫 7 导出 的 概率 空间 (Rr, 多 r,Pxr) 
上 的 随机 函数 和 7 有 相同 的 概率 性 质 . 因此 讨论 (Rr, 多 r,Pr) 是 有 普遍 意义 的 , 其 
中 Pr = Px;. 

定义 4.4.5 设 了 为 任 一 指标 集 , Ty = {t1,… ,tn} CT 是 的 有 限 子 集 , 设 
及 tv(z Tin) 为 (有 RW, 多 YI*) 上 的 概率 分 布 函数 . 如 果 书 ,…sw 满足 如 下 
条 件 : 

( 车 (iv) 是 全 ,2,… ,NN} 的 任 一 排列 , 则 


Fr tw CT1, ,TN) 一 下 (Zi 本 , Tin ); 
(2) 当 m <n 时 , 有 
tr ;Tm) 一 lim Festn (Tl ,Tn). 
Tm+1™T00, ;Tn oo 


则 称 分 布 函数 族 {Fr ww : {,… ,tw} CT} 是 相 容 的 . 
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由 Kolmogorov 相 容 性 定理 不 难得 出 

推论 4.4.2 设 分 布 函数 族 {wo : 但 ，…… ,tw} CT} 是 相 容 的 , 其 中 了 为 
任 一 指标 集 , 则 在 (R77, 多 7) 上 存在 唯一 的 概率 Pr 及 随机 函数 Xr = {Xs,t € T} 
满足 式 (4.4.15), 使 得 Xr 的 任 一 有 限 维 分 量 XT = (和 , XX, ) 的 分 布 函数 为 
Fi tn: 

本 推论 可 由 分 布 函数 与 概率 的 一 一 对 应 及 Kolmogorov 相 容 性 定理 得 到 . 

推论 4.4.3 车 Xx = {Xi,t ET},T 了 为 可 数 下 标 集合 , 则 在 给 定 xz 的 子 o 代 
数 当下 Xz 的 正则 条 件 分 布 存 在 . 

证 不 妨 设 了 = {1,2,…}, 对 一 切 正 整数 k 及 有 理 数 71,… ,rk, 取 定 P(Xi < 
riy1 2 人 上 多) 的 一 个 版 本 , 记 为 及 (71,… ,rk| 名 )(w)， 由 定理 4.4.2, 可 选取 零 测 
集 NE 名 , 使 式 (4.4.5) 对 一 切 (z1,… ,zk) E R* 成 立 , 以 及 


Freri(Z1 ,Phy LET GE) W) = F(T1,: ,ZEIGE)(W), kl1. 


1m 
工 k 十 1 一 十 co 
令 N= U Ni, 则 P(N)=0. 在 NN 上 ,对 每 个 上 定义 甩 (z1,… ,zk 名 )(w) 为 指定 


keET 
的 民 7 上 的 分 布 函数 G. 由 于 及 (zi…… ,zk) 是 相 容 的 , 由 Kolmogorov 相 容 性 定理 
即 知 推论 成 立 . 


4.5 款 列 和 停 时 


蔷 (martingale) 论 是 近代 概率 论 的 一 个 重要 分 支 ， 这 一 随机 过 程 是 由 Levy 
(1937), Ville (1939) 和 Doob (1940) 等 人 提出 并 加 以 研究 的 . 经 过 Meyer (1962) 解 
决 了 上 款 分 解 问题 后 , 蒜 论 有 了 很 大 的 发 展 , 并 且 引 发 了 关于 一 般 过 程 论 的 研究 . 
本 节目 的 是 对 离散 时 间 贰 ( 即 著 列 ) 和 停 时 有 个 基本 了 解 , 为 进一步 学 习 随 机 过 程 
打下 基础 . 

以 下 总 假设 (2,. 多 ,P) 是 一 个 固定 的 完备 概率 空间 , 我 们 的 讨论 都 是 在 这 空间 
上 进行 的 , 并 设 .多 为 平凡 的 o 代数 , 即 .Go = {90, 2}. 

定义 4.5.1 设 { 多 nm > 0} 为 一 族 满足 下 列 条 件 的 多 的 子 o 代数 : 


FC Fl, Vnz0, (4.5.1) 
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则 称 已 = { 多 mn > 0} 为 一 族 单 调 上 升 的 子 o 代数 , 记 为 多 1 (也 称 为 o 代数 流 )， 
而 (f, 多 ,FF,P) 称 为 带 流 的 概率 空间 . 

通常 记 多 = o(.F%,n 之 0). 多 % 这 个 事件 族 在 直观 上 表示 到 时 刻 为 止 时 所 
获得 的 全 部 信息 . 

例 4.5.1 在 公平 赌博 游戏 中 ( 即 甲 乙 两 人 每 局 赢 的 概率 都 是 1/2), 多 表示 
到 第 ?” 局 为 止 甲 乙 两 人 赌博 输赢 的 全 部 可 能 情况 . 显然 , 多 是 单调 上 升 的 ，a 

例 4.5.2 设 {1Xmn 21 为 (2 多 ,P) 上 的 一 列 随机 变量 , 令 多 = ao(X1,…， 
Xn), 则 {多 i,n > 1} 构成 一 个 go 代数 流 , 称 此 o 代数 流 为 {Xn,n 之 1} 的 一 个 自 
然 流 . 4 

定义 4.5.2 设 {Xn,n > 1} 为 (2, 多 , 玉 P) 上 的 一 列 随机 变量 , 车 对 每 个 n， 
都 有 Xe 多 ,, 则 称 {Xn,n > 1} 关于 是 适应 的 .以 后 把 适应 序列 简 记 为 
{Xn, Fn,n > 1}. 

显然 车 {Xn,n > 1 为 随机 变量 序列 ， 令 多 ，= oo( 和 I,… ,Xn)， 则 
{Xn Fi,n 之 1} 为 适应 序列 

定义 4.5.3 可 积 适 应 随机 变量 序列 {Xw, .Zn,n > 1} 称 为 著 (上 著 , 下 
蔷 )(martingale,，super-martingale, sub-martingale), 如 果 对 每 个 自然 数 对 mm < 如 
都 有 


ElXn Fm] = (<, >) Xn, as.. (4.5.2) 


在 上 述 定义 中 , 如 果 {i,n > 1} 为 {Xn,n > 1} 的 自然 o 代数 流 , 则 简称 
{Xn,n 之 1} 是 著 (上 堵 , 下 款 ) 列 . 


命题 4.5.1 {Xn .2%,n 之 1} 是 抽 ( 上 款 , 下 圾 ) 的 充分 必要 条 件 是 
也 [Xi 多] = (<, >) Xn, a.s., N21. | (4.5.3) 
证 显然 式 (4.5.2) 蕴涵 式 (4.5.3)， 反之 , 设 式 (4.5.3) 中 等 号 成 立 , 则 对 任意 
m < n, 由 于 多 mm C 多 故 由 条 件 期 望 平滑 公式 (推论 4.2.1)， 
E[Xn| Zl 一 E{ELX,|.Fn1] (9,} 
二 了 [Xi 多 nm = … 一 了 [Xi 8n] = Xm, a.s.. 
对 上 款 或 下 载 只 要 把 上 式 第 二 个 及 后 面 的 等 号 开始 改 成 相应 的 不 等 号 即 可 . 


该 命题 使 我 们 能 比较 容易 地 判断 一 个 可 积 适 应 随机 变量 序列 是 否 构 成 款 (上 
著 , 下 寺 ) 列 
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例 4.5.3 在 公平 赌博 中 , 以 {X; = 1} 和 {X; = 一 1} 分 别 表示 在 第 i 局 中 甲 

赢 或 乙 赢 这 一 事件 , 则 {X%,n > 1} 为 iid 随机 变量 序列 , 其 分 布 为 P(X = 土 1) = 

1/2,n > 1. 全 n 一 1 局 的 输赢 情况 来 决定 第 n 局 的 赌注 b,_1, 即 

bn1 = bn_1(X1,. -1), 其 中 bo 为 常数 ， 则 他 在 第 ”局 的 所 获 为 tn-1Xn. 记 

So =1 eg Sn = 工 十 > bi_1Xi 表示 到 第 n 局 结束 时 甲 的 赌 金 
大 小 , 多 二 (XI ,Xn), ni 之 1. 由 于 


ElSn+1lF] 一 也 9。 十 bn(X1, , Xn)Xnt1i|Xi, 由 ,Xn] 
= 5% 4 bn (Xi ,Xn) ELXnt] = Sn, as.. 
所 以 {Sn,n > 1} 构成 靳 列 . 4 


例 4.5.4 设 {Xn,n > 1} 为 独立 随机 变量 序列 , 且 E[X%| = 0, 7 > 1 令 
Sn = yx, n 之 1. 因为 ElS,| 六 也 Xi < co, 故 5% 可 积 , 又 
i=1 i=1 


ElSn+1|S1, “0 , Sn] 一 ElSn 41|X1, 0 , Xn| 
= 9n ELXnnlX1,. ,Xn| = Sn, as.. 


故 {5%,n 之 1} 构成 贰 列 . < 
例 4.5.5 设 X 为 可 积 随机 变量 , {多 ,n> 1} 为 o 代数 流 . 令 X= E[X|.2,]， 
则 {Xn, Pn, n 之 1} 为 鞭 . < 


定义 4.5.4 设 {Xh, .Zi,n 之 1} 为 适应 序列 , 且 
El[Xn|Zn_1] = 0，a.s., n> 2, 
则 称 之 为 蒜 差 (martingale difference) 序列 . 
关于 著 差 序列 和 堵 序 列 , 我 们 容易 得 出 如 下 关系 : 
(1) 车 {Xn, Fn} 为 鞭 差 序列 , 则 {Sn,.Z} 为 鞭 序 列 , 其 中 Sn = 5 Xi 
1 
(2) 若 {Xn, 多 为 贺 序 列 , 则 {Xn 一 Xn-_1,.Fn} 为 对 差 序列 ; 
(3) 车 {Xn, Fn} 为 鞭 差 或 损 序 列 ， 则 {Xn,o(X1,-- ,Xn )， 也 之 1} 为 陨 差 或 鞍 


序列 鞍 差 这 一 性 质 描述 了 随机 变量 序列 的 某 种 相依 关系 这 种 相依 关系 界 于 不 相 
关 性 和 独立 性 之 间 . 设 {Xn,o(X1,… ,Xn),n > 1} 为 著 差 序列 , 那么 当 m < n 时 ， 


概率 论 教程 OOOOOOOOOO0000000000000000G0O0. 


即 著 差 性 质 强 于 不 相关 性 ; 其 次 , 它 弱 于 独立 性 . 事实 上 , 若 {Xn,n > 1} 为 独立 零 
均值 的 随机 变量 序列 , 则 对 m < n 有 


E[Xn|X1,::. ,Xm| = 0, 


即 独 立 性 蕴涵 识 差 性 质 . 

从 几何 直观 看 , 我 们 知道 条 件 期 望 E[Y|X] 可 以 看 成 是 随机 变量 Y 在 o(X) 
上 的 投影 . 拷 差 和 独立 则 说 明 任 取 A e o(X), 则 E[YI4] = 0 或 “Y 垂直 I4”, 或 
者 说 与 任 一 XX 的 Borel 可 测 函 数 f(X) 垂直 , 而 不 相关 仅仅 是 了 与 和 的 线性 函 
数 aX 二 b“ 垂 直 ”. 在 款 差 与 独立 性 之 间 也 有 较 大 差别 , 主要 差别 是 独立 性 仅 与 
o 代数 上 的 概率 结构 有 关 , 而 与 随机 变量 在 原子 上 的 取 值 无 关 , 而 蒜 差 与 随机 变 
量 在 原子 上 的 取 值 有 关 , 因而 在 o 代数 上 对 概率 结构 的 要 求 比 独 立 性 要 弱 . 请 看 
下 面 例子 . 

例 4.5.6 设 Xi = afa 一 14s, X2 = DB 一 1Bs, 其 中 A1,Az 及 Bi, Bz 均 属于 
A 记 pi; =P(AiB;)>0,1giij<2. 设 pli+piz+p2l 十 p22 <1, 且 


a(p1i 十 p12) = p21 十 p22 (保证 E[X1] = 0)， 
b(pii 十 p21) = p12 十 p22 (保证 EI[X2] = 0). 


若 要 求 Xi 和 X 不 相关 , 即 要 求 





图 4.4 Ai,A2,，Bi, Bz 及 概率 p;; 示意 图 


0 = E[X1X2] = a(bp11 — p12) — (bp21 — p22), 


即 
a(bpi1 — p12) = bp21 — p22. (4.5.4) 
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如 果 要 求 Xi, Xs 为 款 差 , 即 EE[X2|X1| = 0, 则 只 需 E[Xz141] = 0 及 E[X214s] = 0， 
这 导致 

bp11 ~— p12 =0, bp21— p22 = 0. (4.5.5) 
进一步 , 如 果 要 求 Xi 和 Xo 独立 , 即 P(A4;Bj;) = P(A4i)P(Bj), 1 < i,j < 2, 则 要 求 


p12 = (pll p12)(p12 + p22), p21 = (p21 + p22) (p11 + p21). 
由 后 两 式 得 
P12 = p21, 
p11 = (Dll + p12)?， (4.5.6) 
p22 = (p22 十 pl2) 2. 
由 式 (4.5.6) 结合 E[X1| = BEB[X2] = 0 的 条 件 可 推出 式 (4.5.5) 成 立 , 而 式 (4.5.5) 
可 推出 式 (4.5.4) 成 立 . < 
关于 下 扶 , 我 们 有 如 下 判别 法 , 这 主要 利用 了 条 件 期 望 的 Jensen 不 等 式 . 
定理 4.5.1 () 车 {Xn 多,n > 1} 为 蒜 ,为 下 上 的 有 限 凸 函数 ， 则 
{f Xn), Fn,n 之 1} 为 下 称 ; 
(2) 若 {Xn, rm >> 1} 为 下 载 , 为 到 上 的 有 限 非 降 凸 函数 , 则 {f(Xn), 2;， 
n 之 1} 仍 为 下 载 . 


在 定理 4.5.1 中 , 分 别 取 
f(7)= Iz (pz 1), 
f(x) = [zlloglz|: Tlzlz1} S {zllog™ lz|， 
f(z) = 7， 
则 当 {Xn, 多 ma > 1} 为 拷 时 , {|Xnl?, n,n > 1}, {|[Xnllog! |Xnl, Zn,n > 1} 和 
{XH ,Zn,n 之 1} 皆 为 下 款 ， 
下 面 介 绍 另 一 个 重要 的 概念 一 一 停 时 . 
定义 4.5.5 设 丁 为 (2,. 多 ,FP) 上 的 只 取 非 负 整 值 的 可 测 函 数 ( 可 取 +oc). 
若 对 每 个 ne N= 三 NU{+oo}, 有 
{w : T(w) = n} € 多， (4.5.7) 
则 称 工 为 FF 的 一 个 随机 时 间 . 车 P(T < co) = 1, 则 称 随机 时 间 工 为 停 时 (stopping 


time). 
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如 果 下 是 由 随机 变量 序列 {Xn,n > 1} 所 生成 的 自然 流 , 则 下 的 随机 时 间 ( 停 
时 ) 又 称 为 {Xn,n > 1} 的 随机 时 间 ( 停 时 )， 由 定义 , 事件 {T= n} 只 与 到 时 刻 n 
为 止 时 的 全 部 信息 .多 有关 , 与 以 后 的 信息 无 关 . 容易 验证 , 随机 时 间 的 定义 等 价 
于 对 每 个 me N, 
{w :TT(w) < n} € 多 (4.5.8) 
例 4.5.7 设 BB 为 直线 上 的 Borel 集 , {Xh,. 多 %,n 之 1} 为 适应 序列 , 称 
Tp = inf{n: Xn(w) € B} 
为 初 遇 , 则 Ts 为 一 个 随机 时 间 . 又 若 了 为 停 时 , 则 
S=inf{n:n> T,Xn€B} 


也 是 随机 时 间 . 这 是 因为 .多 " 1 故 


{TB = n} = (N {Xm € o] N {Xn € B} E 多 


7 一 1 


{S =n}= 已 Nn (nt en) ) nto eB es 


k=0 ?ma 一 天 十 工 
例 4.5.8 设 {Xn 之 1) 为 零 均值 独立 随机 变量 序列 , S, = 六 Xi, 则 {9 = 
i 二 1 
1,.…. ,n} 为 对. 令 工 为 首次 部 分 和 不 小 于 。 的 时 刻 , 即 


太一 inf{k:kEeK}, KA#0 
ni K=0, 


其 中 到 = {k: Sk 之 ,1 kn}, 则 类 似 于 例 4.5.7 的 讨论 知 工 为 停 时 . 4 
例 4.5.9 设 {Xn,n 之 1} 为 iid 的 随机 变量 序列 , 且 P(X = 土 1) = 1/2, 记 


| intfkh:ke kK}, K#0 
| +eo， K=0, 


其 中 下 = {k: Sx 二 1,k 之 1}), 则 人 工 为 随机 时 间 . 下 面 来 求人 的 分 布 . 由 于 
{T gn} = {se Sk >1)， {Sn >>1}C {Tgn), 
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{Tgn}={Tgn,S,21}+{T gn,S, <1} 
{Sn >1}+{T gn,S, < 1}. 


由 于 X% 和 一 XX 同 分 布 , 故 


P(T gn,Sn <1)= YP(T=h,S, <1) 
k=1 


| 
NE 


P(T=k,Sn— Se<O0) 


zs 
I 
记 


Ma il 


P(T=k) P(S, — Si < 0) 


| 


P(T=k) P(S, — Ss > 0) 


天 一 1 
-Pre sg > 0) 
kK 二 1 
= 》 PT=k,S,>1)=P(T gn,S,>1) 
k=1 
=P(S, > 1)=P(5, < 一 1)， 
因此 
P(T>n)=1—-P(S5n >1) 一 P(S。 < 一 1 
= P(Sn, = 0)+P(S, = —1). 
当 n= 2m 为 偶数 时 ， 
2my /1 2 
Pr > =P(s, =0 =- (Ww) (3) ~Y ai 


当 n= 2m -1 为 奇数 时 ， 


P(T > m =P(S = -1)= (” )) 全 一 ~1/2. 


mm 
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由 此 可 知 P(T < +o0) = 1 即 工 为 几乎 处 处 有 限 的 . 但 因 六 PIT > m) = +oo, 故 
n=1 

ET = +oo. 这 说 明 部 分 和 5 首次 达到 1 的 时 间 是 几乎 处 处 有 限 的 , 但 平均 到 达 时 

间 是 +o0. 4 


定理 4.5.2(Wald 等 式 ) 设 {X,,n > 1} 为 iid 随机 变量 序列 , E|Xi| < co, 7 为 
{Xn,n 之 1} 的 一 个 停 时 , 满足 ET < oo, 则 


bes - ET . E[X,l. 


证 注意 到 对 任意 了 2 之 ]， T{T>n} 二 1 一 Tren} 与 及 独立 ， 由 推论 2.4.1 得 


T Co 
E > | 一 卫 > lls 


n=1 


wi 


[rm 


3 
由 
已 


NE 


EIXi|: P(T Zn)= El|Xi|: ET < co， 


也 


由 Fubini 定理 知 , 在 如 上 的 表达 式 中 用 X" 替换 |X| 后 期 望 与 求 和 号 的 顺序 交换 
依然 是 可 行 的 . 从 而 本 定理 得 证 . I 


利用 Wald 等 式 可 以 给 出 例 4.5.9 中 停 时 工 满 足 ET = co 的 另外 一 种 证 明 . 我 
们 可 以 反 证 , 若 ET < co, 则 利用 Wald 等 式 ， 


可 = .BT -0, 


I 


矛盾 , 故 ET = ow. 

下 面 讨论 随机 o 代数 的 一 些 问 题 . 比如 说 , 在 公平 赌博 中 , 如 果 规 定 甲 赢 10 元 
后 游戏 停止 , 由 前 面 例子 知道 甲 首次 赢 10 元 的 时 间 是 停 时 . 现 要 研究 到 时 刻 工 为 
止 的 全 部 信息 , 记 为 .多 r. 我 们 有 如 下 的 结果 . 

定理 4.5.3 设 {7%, .n,n 之 1} 为 适应 序列 ,了 为 停 时 , 令 


Yr = Ylrn, 


n=1 
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Fr={A: AeF, AN{T=n}) € .Vn 1), 
则 (1) Yr 为 可 测 函 数 ; (2) Z7 为 多 的 一 个 子 c 代数 ; (3) Yr 和 了 关于 ZT 可 测 . 
证 (1) 设 Be 多 由 于 Zt1, {YreB}= Uf{YeBNn{T=n}eZ cS, 
n=1 
故 Yr 为 可 测 函 数 . 
(2) 对 每 个 n, RN{T=n}j€E FB, 故 0eFr. 若 A EFr,k>1, 则 
(Va) ren Unr=es 


k=1 k=1 
即 .Zzr 在 可 列 并 运算 下 是 封闭 的 . 最 后 , 若 A e Zz, 则 
AN{T=n}= {T=n}~-AN{T=n}€ Zr， 
即 .2Z7 对 余 运算 封闭 . 因此 .Zr 为 多 的 一 个 子 o 代数 , 通常 称 之 为 停 时 工 前 事件 


o 代数 , 它 表 示 到 时 刻 工 为止, 我 们 所 知道 的 全 部 信息 . 
(3) 显然 , Te ZF7. 下 证 Yr € Z7. 对 任意 Be 光 及 每 个 ne 和 N, 


{Yn € B,T=n} € ,~—> {Yh € B} Ee ZF7. 


又 由 (2) 知 多 r 为 o 代数 , 故 
{Yre B}= (|){Y, eB,T=n}e ZF7, 


n=1 


即 Yr 关于 多 7 可 测 . 


定理 4.5.4 设 $S 和 全 为 (f, 多 ,FP) 上 的 两 个 停 时 , 且 S <T, 则 Fs C27 
及 {5 < T} 所 .多 5. 


证 设 Ae 多 sg, 则 对 每 个 n, AN1{5 < n}e 多, 
AN{T <n}=(AN{S <nDn{Tsn} eg, 


于 是 A € .27, 由 此 得 .多 s C .27. 又 


{8 <T} = YS =HN{T> A e Fe, 


k=1 


这 是 因为 {TT >k}= {Tk-1} ee Zi C.F, {5 = ke PF, 由 光 s 的 定义 
{T > k}N{S = k} eZs. I 
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定理 4.5.5 设 {Xn, 多 n,n 之 1} 为 拷 (下 蒜 ), 3 和 了 全 是 两 个 有 界 停 时 , 且 3 入 了 
则 有 
卫 [X7| 多 s] 一 (>) Xs， 8.S.. 
证 以 下 仅 证 明 下 款 情 形 , 即 证 : 对 任意 4 € 史 s， 
| XrdP > | Xs dP. (4.5.9) 


因为 5 和 荆 有 和 界 , 所 以 不 妨 设 m 为 其 上 界 ,使 5 < m,T gm. 记 4h; = AN{S= 让， 
7 二 4… ,mm, 则 hj € 多 ;, 且 对 任意 有 之 jhj 赂 {TT >} € 多 1. 由 下 擂 定 义 可 得 


之 字 2 7 
ea XitidP > [4 sr Xr dP > 


即 


Xk dP 一 Xkg+ridP 


en en 


< AjN{T=k} XrdP = rn Xr dP. 
上 式 两 边 对 上 从 7 到 m 求 和 , 并 在 A; 上 用 Xs 替代 XX;, 得 


. 一 < 
fers XidP jar XmndP < AjN{jg Tm} Xr dP, 
即 
网 XsdP < 网 Xr dP. (4.5.10) 
在 式 (4.5.10) 两 边 对 了 从 1 到 m 求 和 得 式 (4.5.9), 从 而 得 证 . i 


吉 (下 款 ) 和 停 时 有 许多 重要 的 应 用 , 特别 是 在 处 理 最 大 值 的 概率 不 等 式 中 . 下 
面 的 两 个 定理 在 处 理 下 款 的 有 关 问 题 中 是 重要 的 . 

定理 4.5.6(Hajek-Renyi-Chow 不 等 式 ) 设 {5%,.2%n,n > 1} 为 下 载 , .9 = 
{0,2}, an 为 多 1 可 测 的 随机 变量 , 且 0 < ai(w) < a2(w) < .…， as., 则 对 任意 


e> 0 有 
Sk Si — SR_1 
(< | 
之 


证 ”由 于 {max Sk/ak > 之 ce} = 二 { ma, Si /ak ce}, 以 及 根据 定理 4.5.1 知 
{5+, .Zsn 之 1} 仍 为 下 款 , 故 不 失 一 般 性 , 可 设 Ss > 0 令 


i 二 池 ， 


Ql 
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则 了 殉 e. 儿 天 >1. 由 ake. 儿 -1 知 


天 一 1 
oj — Si oo 一 人 
E[Yx|.Fx_1] = + > 一 一 一 BE 2 1 


j=2 7 





1 
二 Yi 十 二 (ELSe| 8 1] — Sx-1) > Yr_1, as.. 
k . 


又 由 ax 非 降 , 有 





因此 , {Yi, .Fh,k 之 1} 为 非 负 下 蒜 . 定义 停 时 


minffe:keK}, K#0 
ln+t+l, K=0, 


其 中 K={k:S/ar >el< < n}, 则 在 集合 全 = 如上 ， EX Sk/ax < 和 了. 故 于 
{Tn} 上 , Yr 6 从 而 


Sk 
eP (8 a 之 =eP(T<n)< ElYrlren}l 


< > ElY, Tr 


一 E[Yn Tren}] < ElYn], 


其 中 的 不 等 式 利 用 了 {六 , .Zk} 的 下 载 性 质 以 及 {T= k} e Zi;. 证 毕 . 和 


推论 4.5.1(Kolmogorov 不 等 式 ) 设 X],.… ,Xn 为 独立 的 随机 变量 , 满足 
E[Xx] = 0, ELX2] < 十 co， k= ] ) 他， 则 对 任意 E> 0, 


1 Th 
< 2 
P (ss, 9k| > 9 ee 2 PP 


其 中 5。 = Dx 
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证 由 于 {Sk,k 之 1} 为 著 , 注意 到 zx? 为 凸 函数 , 故 {52,k 
理 4.5.6 中 取 ail 二 a2 二 :… 一 an 二 1, 立 得 本 推论 . 


定理 4.5.7 设 {Xn, .Fn,n 之 1} 为 蒜 或 下 款 , 记 





已 一。 max XK 之 上 瑟 王 SupXK 之 6 
"seen 5 nf 


则 对 任意 se> 0 和 交 >1, 有 


之 < , 
eP (ges, Xk 之 = < fs X, dP 


车 存在 随机 变量 Y 使 EIY| < co E[Y|.Z;,] > Xn, as., nn 之 1, 则 
P (sp x 之 9 < | Y dP. 
k>1 B 
证 首先 定义 停 时 


n/ntfe:ke KR}, K#0 
n+tl, K=0, 


> 1} 为 下 款 . 在 定 


(4.5.11) 


(4.5.12) 


其 中 太 ={k: Xk 之 6,l1 kn), 则 由 下 款 的 定义 及 于 {T= 有}. 上 Xk 之 6, 有 


> 一 一 
cp (es, Xr 2) = eP(T -Po- k) 


nn n 
< 2 PIXrTr=n] < 2 ElXnIr=n)] 
k=1 k=1 


= EX ren = | XndP. 


其 次 记 Z = max Xk, 2 = sup Xk, 则 Zr 1 2. 于 是 对 任意 0 < e < e 由 式 


k>1 


(4.5.11) 及 定理 条 件 ， 


P(Z > 日 过 lim P(Zn>¢) < 上 lim sup E [Xn Tfz。>ej] 
了 一 OO n— 


1 
< — limsupE [Ylz,>e}] < 二 lim sup 忆 |IYTz>e]. 
€ n+00 € nN O00 


令 e Te 即 得 式 (4.5.12). 
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. 设 Q= {0,1,2}, wf =o({0},{1},{2}), 且 

P(0) =3, PUD) = 了 P(2)= 

= {0,{0,1},{2},0}, 多 = {0,{0,2},{1},0}, 
又 取 了 = Tay(w). 证 明 

EIE(Y IG)|6] 4 ELE(Y (2)|@]. 

. 设 义 服从 参数 为 1 的 Poisson 分 布 ,t+ > 0, 求 E[X|X Vv. 
. 设 荆 ~U(-1,1), 关 和 YY 为 iid, 求 E[X|XVvVY] 及 E[X|X++Y]l. 
. 若 随 机 向 量 (X,Y) 有 密度 函数 p(z,y), X 可 积 , 则 
[zp(2,z — 2)ar 


| D(Z;,z 一 Z)dqz 


a.5.. 


. 在 乘积 空间 (Qi x 0Q22, oh x 吗 ,Pi x P?) 中 , 考虑 坐标 映射 f(w1,tw2) = w1, 证 明 对 任 
意 BEemm x wo, 
P(BIf 二 wi) 一 P2( Bw ), A.S. (P1). 


. 设 XYiid ~ N(0,1), 且 (R,0) 表示 (X,Y) 的 极 坐标 . 

(1) 证 明 X+Y 与 和 一 Y 相互 独立 , 以 及 户 =[( 关 十 了 ?十 (X 一 了 Y) 引 /2. 从 而 得 出 
在 给 定 站 一 Y = 0 下 RR 的 条 件 分 布 是 自由 度 为 1 的 x? 分 布 . 

(2) 证 明 给 定 8 下 R? 的 条 件 分 布 是 自由 度 为 2 的 x? 分 布 ，， 

(3) 给 定 XX 一 Y = 0, 则 R? 的 条 件 分 布 是 自由 度 为 1 的 x? 分 布 ; 而 给 定 6 = /4 
或 5x/4，R? 的 条 件 分 布 是 自由 度 为 2 的 x? 分 布 . 但 事件 {X 一 Y = 0} 和 
{9 二 7/4}U {9 二 5x/4} 是 相同 的 , 试 解决 该 矛盾 . 

, 证 明 如 下 形式 的 Bayes 定理 : 对 任意 Be 名 C 巡 和 4ec, 有 

人 ,P(AIG) dp® 


P(BIA) = oo. 
人 [P(AIG) dp® 
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8. 


10. 


11. 


12. 


13. 
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( 设 X 立 0, 则 
EIXIG] = 风 P(X >t8) dt, as. (P®); 


(2) 推广 的 Markov 不 等 式 


P(IX| > elG) < e*E(XIIG), as. 


. 设 {Ni,t 之 0} 是 一 个 Peisson 过 程 , 参数 为 , 证 明 : 当 0<s<t 时 ， 


P(Ns = kIN:) = 的 (2) (1- 中“ myn as.. 


设 1, XX2,… ,Xn 和 总 ,72,… ,Yn 分别 为 两 组 相互 独立 的 iid 随机 变量 序列 , 记 i，， 
了 2:n， | Yn:n 为 Yi, Y2,…- ,Yn 的 次 序 统计 量 证 明 


3 XiYi 2 > XiYin, 
i=1 i=1 


其 中 三 表示 同 分 布 . 


设 多 = {Amn 之 二 为 的 一 个 可 数 分 审 , or =o(%). 若 9 多 为 邮 的 任 一 子 o 代数 ， 
则 在 给 定 9 下 的 正则 条 件 概率 存在 . 


若 刁 = {Xn,n 之 1} 为 (8,Y,P) 上 的 随机 变量 序列 , 多 为 of 的 子 c 代数 , 证 明 在 给 
定 多 下 久 的 正则 条 件 分 布 存在 . 


设 {An,n 之 1} 是 (8, zy,P) 上 的 一 列 事件 , 称 它们 关于 gy 是 a- 混合 的 , 车 
lm P(An NB)=aP(B),, vBEew. (4.6.1) 


(1) 证 明 : {An,n > 1} 关于 sf 是 a- 混合 的 充分 必要 条 件 是 对 每 个 可 积 随机 变量 X， 
有 
lim XdP=a ji XdP. (4.6.2) 


(2) 设 式 (4.6.1) 对 任意 B € 8 成 立 , 其 中 为 x 系 , 人 E48 以 及 对 n> 1 
4n E ol 了), 证明 {An,n 之 1} 关于 ,x 是 oa- 混合 的 
提示 : 先 对 o(8) 上 的 可 测 函 数 X 验证 式 (4.6.2) 成 立 , 然后 取 给 定 o(_Z) 下 的 
条 件 期 望 . 

(3) 设 {hn,n > 1} 在 概率 P 下 是 a- 混合 的 . 如 果 媚 是 (2,oz) 上 的 另 一 概率 测度 ， 
且 Po 作 P, 则 把 P 换 成 Po 后 , {An,n > 1} 在 概率 PP 下 仍 是 a- 混合 的 . 


14. 


15. 


16. 


17. 


18. 


19. 
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设 (f21, 24,P1) 和 (822, 8,P2) 是 两 个 概率 空间 , (人 ,xy,P) 为 它们 的 乘积 概率 空间 , 令 
二 {A1 x f2 :AilE€ 94), 设 针 为 (8,o7,P) 上 拟 可 积 的 随机 变量 , 记 


Yl, oa) = X(w1 wh) Pa( dws), (ww2) € 0, 
2 





试用 Fubini 定理 证 明 YY 是 条 件 期 望 E[X|%] 的 一 个 版 本 . 


(1) 若 关 € L2,Y 为 随机 变量 , 满足 BE[X|Y] = 了 as， 及 E[Y|X] = X, a.s., 证 明 
X=Y,a.s.; 


(2) 车 入, 锡 为 好 的 子 co 代数 ,XeEeD 设 X = E[X| 色 ], Xz = 也 [LI 移 ]. 车 
六 二 Xz, a.s., 证 明 Xi = 二 Xo, a.s.; 


(3) 车 X,Y €eL 且 了 XIY] = as 及 也 YX] = X,a.s., 则 X=Y,as.. 
在 概率 空间 (9, w,P) 中 , 设 多 为 .的 一 个 子 o 代数 ， 
B= {w: P(4 多 )(w) > 0}, 


其 中 A ey, 证 明 BEeE% 上 且 P(4 一 B)=0. 若 事 件 Be%w 及 P(4 一 B )=0, 则 
P(B-B)=0. 


设 铸 和 YY 为 有 界 随机 变量 , 多 为 xx 的 一 个 子 o 代数 , 证 明 
EIXE(Y|%)] = E[YE(X|®)]. 


设 X 为 概率 空间 (f, wy,P) 上 的 可 积 随机 变量 , 镶 和 哆 为 好 的 两 个 子 c 代数 ， 
AERNG. 若 AN@ = AN 人 多 ， 则 


E[X| 和 多 ] Ta 一 E[X|%] 了 4， 8.S.. 
车 {Xn,n > 1} 为 独立 随机 变量 序列 ，Sw = Xi, 设 {onn > 1} 为 常数 序列 使 
P(S < oj>on>l 且 P(U{fss>o=1L 则 
n= 二 1 
P(S。> an, i.0.) = 1. 


提示 : 任意 给 定 m, 令 


nn) -7 ( U ts > 


了 一 mz2 十 工 
oo 


则 h 1, h(Sm) 一 P(Am+1|Sm), 8.S.， 这 里 Am 一 U {Sn 之 an}, 再 证 明 P(Am+1|Sm) 一 


好 一 7 


1, a.s.. 
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20. 设 其 = (Xi,:… ,Xn) 为 (2,oz,P) 上 的 随机 向 量 ， 且 关于 o( 鲜 ) 的 正则 条 件 概率 
Pc(X)(.，) 存在 , Y 为 (2, sy,P) 上 的 随机 变量 ，Z(z) e 多 ()， 且 EY, E[Z(X)Y] 存 
在 , 则 存在 N e 允 t, P*(N) = 0, 这 里 P* 是 久 在 名 ("上 导出 的 概率 测度 , 可 选取 
E[Y|X] 和 E[Z(X)Y|XX] 的 一 个 版 本 , 使 


PIZ(X)YIXI(w) = Z(X(w)) EIYIXI(w), X(w) EN, 


此 处 的 零 测 集 N 是 与 可 测 函 数 Z(z) 无 关 . 注意 本 结论 与 引 理 4.2.2 的 对 比 , 那里 的 零 
测 集 是 与 Z 有 关 的 . 


21. 设 多 CC of,P*(w,A) 和 PE (w,A4) 分 别 是 在 多 和 %' 下 关于 了 的 正则 条 件 概 
率 , 这 里 (w, 4) E Nx. 设 了 ec 好 ,GeG, 且 EIY2] 和 EY 存在, 则 存在 Ne 多， 
P(N)=0, 当 wE Ne 时 ， 


| Zw)Y(w) PY (w, dw’) 
=/, | Y(w) Pp Cw", dw)| ZW”) PY (w, dw”). 
22， 举例 说 明 E[XIY] = EX, a.s. 不 必 列 涵 X 与 Y 独立 或 不 相关 ， 


23. (条 件 Vitali 定理 ) 设 {Xn,n 之 1}, {Un,n 之 1} 和 UU 氏 为 (9, xY,P) 上 的 随机 变量 , 名 
为 zf 的 子 o 代数 . 


(1) 如 果 X% < Ui, Un = UU, BE 多 一 > EIU|] a.s., 且 U 可 积 , 则 


| ， a.S.. 


(2) 如 果 Xn > Un, Un UU, BIVUn|@] 一 EIUVIG] as., 县 UU 可 积 , 则 


limsupE[Xn|Z| <E [msup Xn 


no0 入 一 DO 





liminf E[Xn|G] >B [iminf X»|@| ， as.， 
(3) 如 果 |Xa| & Un, Xn 2 XU 2 TB 多 一 > E[U|Z], a.s., 且 UV 可 积 , 则 
lim EIXn I] = EIXIE], as. 
24. (Doob 不 等 式 ) 设 1/p 十 1/g = 1, p> 1, {Xn,n 之 1} 是 蒜 , 证 明 
E ( wax IX ) < gEIXnl?. 


1<&ig 
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第 5 章 分 布 函数 和 特征 函数 


在 第 1 章 中 , 我 们 已 经 知道 (R", 多) 上 的 概率 P 可 以 和 民 * 上 的 数值 函数 
一 一 分布 函数 一 一 对 应 ; 与 此 同时 , 我 们 也 将 看 到 (R", 多 () 上 的 概率 P 还 可 以 
和 Rn" 上 的 另 一 种 数值 函数 一 一 特征 函数 建立 一 一 对 应 关系 . 这 一 章 我 们 将 研究 
分 布 函数 和 特征 函数 的 性 质 以 及 它们 之 间 的 相互 关系 . 


5.1 分 布 了 本数 


了 及 ”上 的 分 布 函数 已 经 在 第 1 章 中 定义 过 , 在 本 章 若 无 特别 说 明 , 我 们 总 假定 
分 布 函数 下 单调 非 减 右 连 续 , 满足 F(-co) > 0 及 F(+o00) < 1 (多 数 场合 下 假定 
五 (-eo) = 0). 以 下 介绍 几 个 基本 概念 . 


定义 5.1.1 设 丰 为 恨 * 上 的 分 布 函 数 , 令 
S={z: xER", 有 8 对 Ve > 0,e € R", A2eF (2 — €) > 0})}, 


则 称 5S 为 分 布 函数 F 的 支撑 (support), 5S 中 的 点 称 为 玉 的 支撑 点 . 


RR? 中 的 支撑 可 作 如 下 直观 理解 : 假设 总 单位 为 1 的 质量 散布 在 平面 上 , 但 不 
必 每 点 都 有 质量 . 支撑 9 就 是 有 质量 散布 的 那些 点 或 区 域 . 


以 下 以 Var 下 记 厂 的 全 变 差 , 即 
VarF = F(+00)— F(—o00). 
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由 第 2 章 知 , 如 果 下 为 民 上 的 分 布 函数 , 满足 Var F = 1, 则 有 如 下 的 Lebesgue 
分 解 : 
F(z) = alFac(z) 十 aaEs(zZ) 十 asFa(z)， (5.1.1) 
其 中 及 及 和 两 分 别 为 下 的 绝对 连续 , 奇异 连续 和 阶梯 函数 部 分 ， 
Var Fac = Var Fs = Var Fa = 1, 


而 ui > 0, a 十 o 二 as = 1 更 一 般 地 ,如 果 ai > 0 党 ai 二 1, 则 入 oif; 就 是 函数 
{fu1<i<n) 的 四 组 合 . 关于 分 布 函数 ,我 人 有 一 

命题 5.1.1 车 书 .… 玉 为 Re 上 的 分 布 函数 , 则 它们 的 凸 组 合 仍 是 有 R* 上 的 
分 布 函数 

证 设 忆 = i, 其 中 ai > 0， 4 则 


n 


五 (一 co) >0, F(+0%)= 和 woo) < Das =1. 
i=1 


i=1 


其 次 , FF 的 右 连续 性 和 对 每 个 分 量 的 非 减 性 保持 不 变 , 最 后 ， 
F(x,y|] = Sa hy Rg) 之 0, 
z=1 


因而 FF 仍 是 分 布 函数 . 目 
下 面 研 究 分 布 函数 的 收敛 性 , 为 方便 起 见 , 设 其 为 取 上 的 分 布 函数 . 


5.1.1 随机 变量 对 应 的 分 布 函数 收敛 性 


记 随 机 变量 X 的 分 布 函数 为 Fx, 则 Var Fx =1. 以 C(Fx) 表示 Fx 的 全 体 
连续 点 集合 . 我 们 已 经 考虑 过 随机 变量 序列 收敛 性 中 最 弱 的 一 种 一 一 依 概率 收敛 . 
显然 , 我 们 也 可 以 研究 相应 分 布 函数 Fx 的 收敛 性 问题 . 

定义 5.1.2 如 果 随 机 变量 序列 X。 的 分 布 函数 Fx 在 随机 变量 X 分 布 函数 
的 连续 点 集 C(Fx) 上 收敛 于 Fx, 则 称 XX 依 分 布 收敛 于 X, 记 为 和 X, -4 义 , 有 时 
也 记 为 -号 下 或 X, 革 X. 

依 分 布 收 伍 是 最 弱 的 一 种 收 和 敛 性 , 即 由 Fx, (2) 一 Fx (zx), yze C(Fx), 一般 推 
不 出 XX XX. 此 外 ,2 -4 久生, -二 了 也 不 能 推出 XX, 二, -2 多 十 Y ( 假 
定 对 任意 n, 变量 X,, 与 7, 相互 独立 , 则 结论 成 立 , 见 本 章 习 题 15). 
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引 理 5.1.1 设 Xn,X 为 随机 变量 , 则 对 任意 e> 0 和 ze 及, 有 
P(X <zx—-e)—P(X,—X|> ej<P(Xn & 7) 
< P(X z+e)+P(X,—X|> 6)， 
证 ”由 于 对 任意 ec>0 和 eR, 
{Xn < 7}= {Xn TXT+e)}+{Xn TX>ZL+e) 
C{X<zr+eUu{X,— X|> ee), 


所 以 
P(Xn < 7) < P(X STI+e+P(X, 一 和 | > 日. 
同 理 可 证 另 半边 不 等 式 . | 
由 引 理 5.1.1, 我 们 可 直接 推 得 
命题 5.1.2 若 X 工 , X, 则 XX, -4 XX. 
推论 5.1.1 设 Xn 为 随机 变量 , c 为 常数 , 则 


P d 
Xn 一 人 CC > Xn CO— cc. 


证 必要 性 由 命题 5.1.2 直接 得 到 . 下 证 充分 性 , 设 X。 -dc. 注意 到 取 常 数 c 
的 退化 随机 变量 的 分 布 函数 为 F(z) = To)(z), CUP) = {c}*. 于 是 对 Ve > 0， 


P(Xn 一 cl| >ej=P(Xn >c+ej 十 P(X <c—e) 
=1— Fx,(c+e + rx,(c—e-—)— 0, 


即 X, 2 ec. | 


注 1 命题 5.1.2 对 随机 向 量 的 分 布 函数 也 成 立 . 
5.1.2 分 布 函数 的 收敛 性 
由 命题 5.1.2 可 以 想到 , 一 列 分 布 函 数 玉 向 分 布 函数 下 的 收 伍 性 定义 中 只 能 


在 下 的 连续 点 集 C(F) 上 有 意义 , 而 在 C(F) 余 集 的 点 上 是 否 收敛 不 在 考虑 之 列 . 
为 此 , 我 们 给 出 如 下 定义 . 
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定义 5.1.3 设 及 和 下 是 分 布 函数 , 车 在 C(F) 上 , Fn 一 卫 , 则 称 FE 弱 收敛 
于 F, 记 为 玉 二， 万. 


此 定义 是 合理 的 , 即 若 弱 极限 下 存在 ; 则 必 唯 一 . 这 是 因为 若 ,一 FF, 了 一 
F, 则 下 与 F' 在 C(F)NC(F') 上 相等 . 但 C(F)NC(F') 的 余 集 是 可 数 集合 , 所 以 
由 右 连 续 性 知 政 和 F' 在 恨 上 相等 . 

定义 5.1.4 车 互 ,一 下, 且 Var 下 ,一 Var 则 称 分 布 函 数 序 列 五 , 完全 收敛 
于 分 布 函数 F, 记 为 ,一 > 了 F. 


注意 , 由 五 , 一 > 斑 并 不 能 保证 Var 忆 一 Var .例如 , 令 而 (z) = Tlo,oo)(2)， 
Fa(x) = Fo(z+n) = I-_n,00) (7), 则 瓦 ,(z) 一 加 (4+o0) = 1 车 令 下 =1, 则 琴 一 局 
但 所 (--00) =0, 而 下 (00) =1, 所 以 Var 五 ,二 1 关 0== Var 下. 但 我 们 有 

命题 5.1.3 若 成 , 一 F, 则 


lim sup Fn(—00) 和 下 (一 oo) < F(+00) < liminf F,(+00), 
Var F < liminf Var Py. 


此 外 , F 一 ' 下 的 充分 必要 条 件 是 当 a 一 +oo 时 ， 


SU dF,(z 0. 5.1.2 
sup fi, (2) 一 (5.1.2) 


证 由 (--00) < 琴 (7) < 本 (+00) 知 , 当 zeC(F) 时 ,由 太一 下 得 
lim sup F,(—00) < F(z) & lim inf F,,(+00). 
再 令 z 在 C(F) 中 趋 于 土 oo, 即 得 第 一 个 结论 . 由 此 得 
Var F = F(+00) — F(—00) & liminf[F,(+00) — Fa(—00)] = lim inf Var F,. 


下 面 证 最 后 一 个 结论 . 
必要 性 设 后 , 一 、 FF. 首先 存在 a > 0, 土 aE C(), 使 
IF(+ta) — F(+00)| < e. 
由 如 一 下, 存在 no, 当 n > no 时 ， 


| 本 (十 ao) ~ F(ta)| < e， [F(t+00)— F(+00)| < e. 
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故 当 4 > a 时 ， 
SU dzFn(Z) 和 su dF (x 
n> {lzl>A4} 人 ny {Iz|>a} (2) 


= Sup [Fa(+00) — F(a) + Fa(—a) — Fn(—o0)] 


N70 


< sup llFn(+0%0) — F(+o0)| + |F(+00) 一 下 (十 oj 


nno 


+|F(+ta) — F(t+a)|] < 6e. 





对 任意 n < no, 存在 b>0, 使 
wy dP,(7) < e. 
取 M 二 avb, 则 当 A>M 时， 


8 dF < _ 76. 
sup 几 wdP<r 


充分 性 设 式 (5.1.2) 成 立 , 则 对 ve > 0, 存在 4, 当 a> 4 时 有 


sup | 于 ( 士 co) 一 F(ta)| < e， 
n 之 1 


由 于 已 , 一 F, 故 当 a > 4, 十 ae C(F) 时 , 存在 no, 对 一 切 n > no 有 














| 本 (+o) — Fl(+o)|<¢e, |F(+00) - F(t+o)| <e 
这 时 ， 
| 本 (二 oo) — F(+o0)| < |Fn(+00) - Fa(+o)|+ |F,(+a) — F(+a)) 
+|F(+a) — F(+00)| < 3¢, 
所 以 ,一 Ff. 


定理 5.1.1(Helly 引 理 ) 设 到 是 一 列 分 布 函数 , 则 存在 子 序列 户 ,， 及 分 布 函 
数 王 , 使 瑟 ， 一 顾 . 


证 由 于 分 布 函数 的 值 本 质 上 由 及 中 可 数 笛 集 上 的 值 所 唯一 确定 , 故 可 用 对 
角 线 法 选 出 子 列 , 使 其 弱 收 和 敛 于 一 个 分 布 函数 下 . 具体 证 明 请 读者 自行 补 出 ， 时 
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命题 5.1.4 若 如 一 下 ,天 为 连续 分 布 函数 , 则 收敛 关于 x 是 一 致 的 . 


证 对 Ye > 0, 由 玉 的 连续 性 知 , 存在 -oo = ao < al < < 咪 <ak+l 一 十 oo， 
使 得 


FE(ojH1) ~ Fa;) < 3 j=0,1,...,k. 
由 ,一 * 下 知 存在 no, 当 n > no 时 ， 
F(a;) — Flaj)| < 3 j=0,1,.. ,k+l. 
对 任 一 z € RR, 存在 je {0,…,k} 使 aj <z<ajti 当 n>no 时 ,有 
Fn(z) — F(z) & [Fnl@st) — Flasti)] + lF(ajt1) — Flay)] < 6 
以 及 
Fn(72) — F(x) Z Fn(a;) — Flayt1) > 一 6 


所 以 当 n > no 时 , 对 一 切 ze 展 , 恒 有 | 已 (z) 一 F(z) < 6 即 丽 关于 zz 一 致 收敛 
于 也. 上 


注 2 在 命题 5.1.4 中 , 条 件 玉 一 下 不 能 替换 为 机 二 FF. 否则 , 结论 不 成 立 
( 见 定义 5.1.4 之 后 的 反例 ). 


如 果 全 变 差 为 1 的 分 布 函数 序列 瓦 一 已, 则 我 们 有 如 下 结果 . 


定理 5.1.2( 嵌 入 定理 ) 设 及 -下 且 Var 下, = 1, 则 存在 定义 于 同一 概率 空 
间 上 的 随机 变量 序列 {X, Xn,n > 1}, 使 得 Fx = 本 ,Fx = 了 且 对 每 个 we 92， 
有 Xn(w) 一 X(wW). 


证 取 f= (0,1), 为 (0,1) 上 的 Borel 域 , 而 P 为 其 上 的 Lebesgue 测度 . 设 
WE (0,1), 令 


Xn(wW) =int{s:w & Fn(7)}, XW) = inf{r:w < F(z)}, 
则 经 过 简单 的 讨论 可 知 , w < 琴 ,(x) 当 且 仅 当 Xn(w) < 7x, 故 
P({w: Xn(w) < 7 = P{W :w & Fn(x))) = Fn(z), 
因此 Fx, = 五,, 类 似 地 , Fx = 下 . 下面 证 明 Xn 点 点 收敛 于 X. 


190 


OOoooooocoocooooooOOOOOO 第 5 章 分 布 函数 和 特征 函数 


设 we (0,1), 对 给 定 的 e > 0, 选取 x eC(F), 使 X(w) 一 e < xz < 六 (w), 则 
F(z) <w 和 雇 ,(x) 一 F(z) 蕴涵 对 充分 大 的 n 有 琴 (z) < 因此 Xuw) 一 e<z< 
Xn(w). 由 此 知 

lim inf Xn (w) > X(wW). 
车 w<w, 对 ce>0, 取 zxzEC(F), 使 X(w) <zx < XW)+e 则 w <w < 
F(X(w')) < F(z), 于 是 对 充分 大 的 n, w < 本,(7). 因此 , Xlw) < <X(w)+e. 
取 上 极限 , 再 令 e 一 0, 当 由 < U' 时 ， 


lim sup Xn(w) < 和 (WO 


由 上 可 知 , 如 果 X 在 w 处 连续 , 则 Xn(w) 天 (w). 


由 于 XX 在 (0,1) 上 非 减 , 故 它 至 多 有 可 列 个 不 连续 点 . 在 X 的 不 连续 点 w 上 ， 
重新 定义 Xn(w) = XX(w) = 0. 经 过 这 一 重新 定义 , 对 每 个 w 都 有 Xi,(w) 一 XX(w). 
由 于 X 和 X 仅 在 一 个 Lebesgue 零 测 集 上 改动 , 所 以 它们 的 分 布 函 数 仍然 是 下 
和 已 . 


定理 5.1.2 的 证 明 本 质 上 是 利用 了 实 轴 的 有 序 结构 , 因此 也 可 以 推广 到 R* 中 
去 , 但 证 明 要 复杂 得 多 . 


下 面 讨论 当 9 为 连续 函数 时 ，| gd 的 收 侠 性 问题 . 为 此 先 引入 一 些 集合 : 


cr = {f : /连续 且 存 在 紧 集 K, 当 ze€K° 时 f(x)=0), 
Co= {f : 了 连续，lim f(x) = 0}， 


[zl—o0 
CB = {f : f 连续 且 存 在 常数 M, 使 |f| < MM}, 
C = {f : f 连续 }. 


显然 , Ck C Co C Cp C C. 以 下 讨论 函数 g 属于 不 同 的 C 集合 时 , 在 什么 条 
件 下 , 分 布 沙 数 的 弱 收 敛 性 或 完全 收敛 性 能 推出 gd 的 收敛 性 . 

定理 5.1.3(Helly-Bray) 

(1) 设 厂 , 一 > 下 十 c (c 为 常数), a <b 为 一 对 常数 , 满足 FF,(a) 一 F(a) 上 +c， 
(5) 一 (0) 十 c. 车 geC, 则 


b b 
ram 一 9(2)dF(z). 
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车 g€ Co, 则 
[g(r)aF(z) 一 rdFGn)， 


(2) 若 五 一 > 下 十 c 及 ge Ca, 则 





[seama 一 全 sd 


证 (1) 令 gm(7) = 时 gm) Tm; ,Ti AZ )， 其 中 
a= Tm]l < Tm2 < < Tm,kmt+l =b, 


且 当 mm 一 co 时 入 = sup (zmiti 一 Zimi) 一 0, 则 由 Riemann-Stieltjes 积分 定义 ， 
1&iS km 
当 mm 一 co 时 , 有 


“gn(z)dFa(z) Y "glz)dF(z), 
上 ] 

， gm(Z)dE(z) 一 一 ， g(x)dF (zx). 
| a 


选取 所 有 的 分 点 zmi e C(F), 则 由 及 一 > 下 十 c 对 每 个 m 和 每 个 有 , 当 n 一 oo 
时 ， 有 (XiyZmi+il 下 F(Xmi, Tm, i+1]- 因此 


『 gm(Z zx)dF,,( -Ha Xmi)P, n(Tmi, Tm ,+1] 


下 Yan) Plom Trm,it+1] 一 「 gm(zZ)dE(z). 
注意 到 
b b 
rd) — | gz)daF(z) 
= ga ~ gm (ode) + f [om(z) ~ go)]aF(z) 
-oama -了 oa 


由 于 当 六 一 co 时 Sup ,9(2) 一 gm 人 (zj| 一 0, 所 以 在 上 式 中 可 取 充 分 大 的 m, 使 前 


两 项 的 绝对 值 小 于 在意 给 定 的 值 . 对 于 取 定 的 m, 再 取 nn 充分 大 , 则 上 式 中 第 三 项 
的 绝对 值 可 以 任意 小 . 这 就 证 明了 本 定理 (1) 的 前 半 部 分 . 
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其 它 儿 个 结论 可 以 利用 下 面 的 不 等 式 得 出 : 
(fo gar ~ [9aF| < | ga f oar,l+ 及 oar- oa 
J. oar, 人 on (5.1.3) 


注 3 定理 5.1.3 的 结论 可 以 平行 推广 到 R* 中 去 . 


由 定理 5.1.3 可 以 导出 关于 矩 的 一 些 结果 . 类 似 于 随机 变量 一 致 可 积 性 的 定义 ， 
我 们 引入 


定义 5.1.5 设 geC, 称 |9| 关于 分 布 函数 序列 {Fr,n > 1} 一 致 可 积 , 车 





sup J ligadFn(z) 一 0 (一 co) (5.1.4) 


如 果 9 = 1, 分 布 函数 序列 {五 ,,n > 1} 满足 式 (5.1.4), 则 称 { 本 ,nm > 1} 为 胎 紧 
的 (tight), 即 


sup (Var Fa — Fal—a,al) = sp 上 dP(z) —; 0. 
定理 5.1.4 设 geoC, 五, 一 下 十 c (c 为 常数 )， 则 
(1) liminf 三 | x)|dF,(z )>[ | z)ldF(z 
(2) jg| 关于 {x,n > 1} 的 一 致 可 积 性 蕴涵 
六 vd) 一 三 so)daFlo eR:; 
(3) |g| 关于 {n,n 之 1} 一 致 可 积 当 且 仅 当 
[are) — [| 


证 (1) 设 +tc € C(F,), 则 


)|dE(z) < eo. 





全 leiapz) > {Igo)laFs(z) 一 三 elareo 


在 上 式 两 侧 分 别 对 n 取 下 极限 远 算 , 再 令 ec 沿 着 C(F) 趋 于 +oo 即 可 证 得 (1). 
(2) 由 一 致 可 积 性 知 , 对 任意 e > 0, 存在 ce > 0, 当 c> ce 及 +tc e C(F) 时 ， 


lg(z)ldF, (x) < e. 


na {lz|>c} 
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取 c >c 使 得 十 eE C(F), 由 于 


js Iga)ldFn(z) 一 ee) lg(o)ldF(z), 
故 
an lg(z)ldF(z) < < 
令 一 +eo 得 上 wetz)ldFGOD) Se 从 而 | | zjldF(z) < co. 其 次 , 取 c > ce， 


士 cE C(F), 由 式 (5.1.3) 可 得 当 n 一 co 时 ， 


| gdFn 一 | >、 ed Se ius gdFn 一 Jiaes edn| te 
(3) 充分 性 在 (2) 中 把 函数 g 替换 成 lg| 即 可 . 
必要 性 对 任意 ce> 0, 取 上 co e C(F) 使 得 fe lgldF < ef/3. 注意 到 
fw lara < |f Iola — [lglaF| + fy lolaF 


fc om = fee lar. 


再 由 条 件 知 , 可 选取 no, 当 n > no 时, 上 式 的 第 一 项 和 第 三 项 都 小 于 e/3, 由 此 可 
得 到 


十 





QF < 6. 
Sup jl>co 9 € 
对 于 固定 的 no， 必 存 在 C1 使 得 jzl>e} lgldF; < €,7 一 1,... 1 To. 取 C 一 max{co, c1}, 
I C1 

则 有 

dP, < 

ol {al>e ) | 6 

即 | 关于 【Rn > 1} 一 致 可 积 ， 


设 {Xn,n > 1} 为 随机 变量 序列 , XX 的 分 布 函数 为 五,, 则 由 定义 易 知 {Xn,n > 
1} 一 致 可 积 等 价 于 函数 g(z) = |z| 关于 { 瑟 和 m > 1} 一 致 可 积 . 类 似 地 , 对 任意 
7 > 0, { am 之 1} 一 致 可 积 等 价 于 函数 g(x) = |z|" 关于 { 忆 mm 之 1} 一 致 可 积 . 
注意 到 该 事实 , 我 们 可 以 给 出 定理 5.1.4 的 如 下 推论 . 


推论 5.1.2 设 {X, Xn,n > 1} 为 随机 变量 序列 , 满足 X -外 ,r > 0, 则 


(1) EIX| < liminf E |X,; 
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(2) {|Xnl",n 之 1} 一致 可 积 当 且 仪 当 
dim ElXn|” = EI|X|” < 十 co， 
特别 地 , 对 于 非 负 随 机 变量 序列 {X Xn > 1}, 车 X - 基 , 则 由 推论 5.1.2 


知 : E[Xn] 一 > EX < eco 的 充分 必要 条 件 为 {X,,n > 1} 是 一 致 可 积 的 . 
例 5.1.1 设 


mk 一 | zedF(z), Hr = 三 Izl"dF(z) 


分 别 表 示 分 布 函数 FF 的 阶 矩 和 阶 绝 对 矩 . 设 {五 ,,n > 1} 为 分 布 函数 序列 , 由 
定理 5.1.1 知 , 存在 其 子 列 {Fy}, 使 丽 ， 一 玉 . 车 |z|" 关于 玉 一 致 可 积 , ro > 0， 
则 对 每 个 0 入 r < 7o, 当 c 一 oo 时 , 对 n' 一致 地 有 


上 sa lal dFw(X) Se sa zl dF (x) — 0. 
特别 取 = 0, 由 上 式 得 


m2 po, dF (X) 0 (一 co) 


即 Var Fy 一 Var 五. 由 命题 5.1.3 得 已 ， -下 4 
例 5.1.2 设 一 > FF, 且 对 每 个 p > 0 有 


limsup 三 [zdF,(z) < oo， 
则 对 任 一 对 满足 pr > 1+g 的 非 负 g 和 , 有 


im [A( 1 十 |z| 轨 Rs(z) — F(x) dr = 0. 


证 明 令 c= imsup | Izl?dF(z) < co. 由 定理 5.1.3 知 , 若 a > 0, 十 KE 
C(F), 有 
三 lzlPdF(z) = lim [lzlrdF,(z) < ec 


令 士 Q 沿 着 C(F) 趋 于 工 DO， 则 





oo0 
[lzPaF(z) se 
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当 z < 一 1 时 
zpPF(z)= lzP /ar < {lvlParly) ge 
当 zxz > 1 时， 
IzPO— F(a) = adr) < f° vrary) <e 


在 上 述 两 个 估计 式 中 , 以 FF 替换 F, 以 c 十 1 替换 c, 则 当 n 充分 大 时 仍 成 立 . 由 此 
可 得 对 |z| > 1 和 一 切 充分 大 的 n, 有 


[F(z) — P(r)| < (c+1) lz ?. 
因此 对 任意 g > 0 和 一 切 充分 大 的 n, 有 
(1+|z|) Fr (2) — FON < G(7), 
其 中 
(e 二 Jr 二 zjolzl-2r， |z|>1. 


车 g>0 且 pr 一 gq>1, 则 G(z) 在 展 上 绝对 可 积 , 而 到 一 一 , 故 在 除了 可 列 个 点 
外 , FF, 处 处 收敛 于 所 因而 由 控制 收敛 定理 得 


cao- 人 lzl 和 1 


dn [0 + |z|) F(z) — F(x) dz 
= ar lm | 本 -Perdar=0 


证 毕 . < 


5.2 特征 函数 与 分 布 前 数 


5.2.1 道 转 公式 


设 (0, sg,P) 是 一 个 概率 空间 , {Xi,i e 1} 是 其 上 的 一 列 随机 变量 , 它们 的 概 
率 性 质 (如 分 布 、 各 种 相依 性 、 各 种 收敛 性 等 ) 是 通过 该 族 随 机 变量 的 概率 分 布 来 
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表述 的 . 但 是 概率 分 布 是 集 函 , 应 用 上 不 方便 . 由 此 引入 了 分 布 函数 的 概念 , 这 是 
一 个 点 函数 , 随机 变量 族 的 概率 性 质 可 以 通过 分 布 函数 来 描述 , 这 是 我 们 比较 熟悉 
的 . 处 理 点 函数 的 一 种 常用 方法 是 Fourier 变换 . 把 它 引伸 过 来 , 即 为 我 们 的 特征 函 


数 (characteristic function). 
定义 5.2.1 设 下 为 分 布 函 数 , 则 实 变量 复 值 函数 
f(t) = 三 eitzdF(z) = 三 cos(tzjdF(z) 十 i 三 sin(tr)dF(z) 
称 为 下 的 特征 函数 . 如 果 下 是 某 个 随机 变量 X 的 分 布 函数 , 则 称 
E[eitx] = 厂 eitzedF(z] 
为 随机 变量 X 的 特征 函数 . 


特征 函数 有 许多 优良 性 质 . 特别 地 , 特征 函数 是 以 1 为 界 的 连续 实 变量 复 值 函 
数 . 下 面 我 们 将 证 明 特 征 函数 和 分 布 函数 之 间 可 以 建立 一 一 对 应 . 利用 此 性 质 , 我 
们 可 以 用 特征 函数 来 研究 独立 随机 变量 和 的 分 布 函数 , 相依 随机 变量 序列 部 分 和 
的 渐 近 性 质 , 以 及 其 他 许多 与 分 布 有 关 的 性 质 . 下 面 先 证 明 特 征 函 数 和 分 布 函数 是 
一 一 对 应 的 . 


定理 5.2.1( 逆 转 公式 ) 设 f 是 分 布 函数 下 的 特征 函数 , 则 对 任意 a,b € 民 ， 


FO) + Pl) P+ PD) -im 1 『 一 fdt. (621) 








特别 地 , 当 ab E C(F) 时 ， 


1 —ita _ e-itb 


F 人 -Flo) = Jim 元 [. -一 一 一 f(t)dt. 


证 不 妨 设 a <b. 考察 积分 


—ita _ eitb 


JO< 喜 三 一 fd 


1 < co eita eitb jp 
-过 矿 ( 人 和 一 全 一 dan) dt. 





由 于 


.|e 
< | eau 
a 











<b—a, 
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所 以 积分 J(c) 有 限 . 利用 Fubini 定理 , 交换 积分 顺序 得 


一 过 a 


1 ” °e€ 一 ei itzx 
19= 去 帮 ([ et) dp) 


_ 1 > (人 Sint(z 一 0) gs 『 sint(z — 5b) a) dP(z) 





0 t 0 t 
==/ [T(z — a,c) — T(z— b,c)]dF(z), (5.2.2) 
其 中 
IT(Y, 2) = 上 sina, 
注意 到 


I(1, 7x) = 上 sinw [三 edo| du 一 上 I e “sinu du dv 


oo 1 vsinZ++cosT oy 
一 人 -~ d 
(a 1 二 + v2 ° ) " 
户 ssinz++ zxcosr 


一 号 
e “ds 
0 22 十 3? 


区 
— 3 (一 +oo)， 
其 中 最 后 一 式 利用 了 控制 收敛 定理 . 于 是 
Jim_ 1(7,7) = 3 sgn()), 


这 里 sgn(.) 为 符号 函数 . 因而 


7, a<r<b 
lim [T(z —a,c)—I(z—b,c)]=$4 A/2, z=0,b (5.2.3) 
0, zla,d). 


由 此 知 , 对 一 切 x, 当 c 充分 大 时 , 函数 T(x 一 a,c) 一 T(z 一 b,c) 关于 变量 c 有 界 . 将 
式 (5.2.2) 中 积分 分 成 三 部 分 , 分 别 利用 控制 收敛 定理 和 式 (5.2.3), 得 


Jimm, 10 = 3aP (0) + [os AP) + fy aaP®) 
_ F(b)+F0D-) Fla)+ F(a—) 
”2 2 i 
定理 证 毕 . | 
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推论 5.2.1( 唯 一 性 定理 ) 分 布 函数 由 特征 函数 唯一 确定 . 
证 设 瑟 和 F 是 两 个 分 布 函数 ,有 共同 的 特征 函数 f, 下面 证 明 五 = 肪 . 为 
此 , 设 a,be C( 扎 )nC( 访 ), a <5b, 则 由 道 转 公式 知 
Fi(b) 一 F(a) 一 F2(b) 一 F(a). 
令 a 沿 C(FI)NC(F,) 趋 于 一 Co， 则 得 Fi (b) 一 F2(b), 即 在 C( InC(P) 上 = PF,. 
从 而 由 分 布 函数 的 右 连 续 性 知 , 在 有 R 上 刻 = 到 . 


推论 5.2.2 设 分 布 函数 FF 的 特征 函数 为 f, 则 玉 在 a 点 可 微 的 充分 必要 条 
件 是 





: ; 1 5 T 一 e iph 一 ia 
轴 旺 去 厂 eerou 


存在 有 限 , 此 时 , F(a) 等 于 上 式 的 值 . 特别 , 如 果 特 征 函 数 了 在 及 上 绝对 可 积 , 则 
下 在 展 上 处 处 存在 ,而且 有 界 连 续 , 满足 
= 元 三 eit F(t) dt， (5.2.4) 
即 密度 函数 和 特征 函数 是 一 对 Fourier 变换 和 反 变 换 . 

证 前 一 结论 由 导数 的 定义 及 逆转 公式 即 得 . 在 后 一 结论 中 , 任 取 a e RR, 令 
bE C(F) 且 b, 4 a, 我 们 有 


F(bn) 一 TO + Te) < 4 三 |f (Dldt < +eo， 


F(z) 


于 是 F(b%) 一 [F(a)++F(a 一 )]/2 一 > 0. 注意 到 局) 一 F(a), 我们 有 F(a) = F(a-)， 
即 F(z) 处 处 连续 . 
另 一 方面 , 由 于 


|、 一 cy dt- 三 | f eau 


< 三 f(t) dt < 上 +oo， 


“|f (Dlat 





所 以 ith ith 
,1 rel-eiht io _1 [rm 1-e™ i 
dt J -和 -于 











和 le oy(pat 


= lim 一 一 
h—oo0 hh 一 0 27 J—o0 ith 
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—ith 





1 ro , le 
= | ith 


eitz f(t)dt 


1 29 —itzx 
= 元 | ef()at 


即 式 (5.2.4) 成 立 . | 
推论 5.2.3 设 分 布 函 数 FF 的 特征 函数 为 f, 则 


F(z) — F(z—) = lim 二 三 e-its f(t)dt, YzeR. 


c 一 co 2c 





证 
加 二 0 下 直上 eonty 
= lim n dz) oo "qt 
-rn 
= F(z) - Flz-)， 
其 中 倒数 第 二 个 等 号 利用 了 控制 收敛 定理 . a 


设 研 为 纯 离散 分 布 , F(z) = 并 pa oo)(z), 且 其 跳跃 点 zs 有 如 下 形式 : 存在 
实数 和 万 > 0, 使 z 一 a 十 hh, 其 中 启 , 为 非 负 整数 , 则 称 严 为 格子 点 分 布 
推论 5.2.4 设 格子 点 分 布 的 特征 函数 为 /, 且 


7) = pn Tarp ho0) (2), 


则 
_ h —it(at+k»h) 
Pn = 寺 J e flt)at. 


证 根据 特征 函数 的 定义 ， 
f(t)eite = 》 veitkenpe， vteR. 
£ 


在 上 式 两 边 同 乘 以 e ten, 并 在 区 间 |t| < rx/h 上 求 积分 即 可 得 证 . 
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5.2.2 几 种 收敛 性 之 间 的 关系 


由 于 特征 函数 是 分 布 函 数 的 Fourier 变换 , 所 以 关于 分 布 函数 的 收敛 性 与 特征 

函数 的 收敛 性 有 着 十 分 紧密 的 联系 . 令 
FO)= ru= 记 一 

我 们 称 f 为 积分 特征 函数 . 由 于 f 和 连续 的 特征 函数 上 是 一 一 对 应 的 , 而 f 又 与 分 
布 函数 玉 一 一 对 应 , 因此 ff 与 下 之 间 也 是 一 一 对 应 的 . 下 面 我 们 将 证 明 分 布 函数 
的 弱 收 和 敛 与 完全 收敛 分 别 对 应 于 积分 特征 函数 和 特征 函数 序列 的 普通 收敛 性 为 
方便 起 见 , 我 们 总 假定 记 和 所 分 别 对 应 分 布 函数 互 , 的 特征 函数 和 积分 特征 函数 ， 
f 和 分 别 对 应 分 布 函数 下 的 特征 函数 和 积分 特征 函数 . 

定理 5.2.2 如 果 五 , 一 F, 则 所 一 ;反之 ,车 所 一 $5, 则 存在 分 布 函 数 正 使 
FFHEf=. 

证 因为 当 z 一 co 时 , (eitz 一 1)/(iz) 一 0, 根据 Helly-Bray 定理 (1) 中 的 第 
二 个 结论 立 得 本 定理 的 第 一 个 结论 . 若 所 一 35， 由 定理 5.1.1, 存在 {fF} 的 子 列 
{fw}, 使 本 ,, 一 已 ,再 由 Helly-Bray 定理 得 


co eitz 一 1 





dF(z). 








0 = mn ha) = mn [plo) 
-7 
由 于 f 完全 确定 了 下 ,所 以 序列 {Fn} 的 所 有 弱 收 敛 子 列 的 极限 下 是 唯一 的 (因而 
FF), 有 f=7. I 


推论 5.2.5 积分 特征 函数 的 每 个 序列 户 在 直线 上 普通 收敛 性 意义 下 总 是 列 
紧 的 ( 即 必 有 收敛 子 列 ). 


推论 5.2.6 如 果 所 一 g,a.e., 则 五 ,一 > 下 且 f=,a.e., 这 里 a.e. 是 对 恨 上 
的 Lebesgue 测度 而 言 . 

证 因为 f;, 一 g, a.e., 由 fi 是 界 为 1 的 连续 函数 知 g 是 ae. 有 界 的 可 测 函数 ， 
所 以 由 控制 收敛 定理 得 产 一 5, 其 中 5(t) = 扩 g(wjdu， 由 定理 5.2.2 知 所 > 
且 f ==5. 注意 到 下 的 导数 为 1, 5 导数 为 g, 故 f 一 g, ae.. 

定理 5.2.3( 完 全 收敛 性 准则 ) 如 果 五, 一 , 则 所 一 了 ;反之 , 若 所 一 g 且 
g 在 t=0 处 连续 , 则 请, -FP 且 / =yg. 
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证 设 三 , -二 下, 由 Helly-Bray 定理 ， 
六 = 站 sedPmG) 一 人 edFG)= f(t). 
反之 , 设 所 一 9g 且 9 在 1- 0 处 连续 , 则 由 推论 52.6 知 及 -下 且 下 =9 故 
= fl(wdu = = glu)du. 
因为 0 是 f 和 g 的 连续 点 , 所 以 令 1 0 得 f(0) 一 g(0), 即 - 
Var Fn, = fa(0) — g(0) = f(0) = Var F, 


从 而 ,一 下. 


由 定理 5.2.3 看 出 完全 收敛 性 对 应 了 极限 特征 函数 在 0 点 的 连续 性 . 当 , 和 
fn 分 别 是 随机 变量 的 分 布 函数 和 特征 函数 时 , 后 面 一 个 断言 即 为 著名 的 P. Levy 


的 关于 特征 函数 的 连续 性 定理 . 


定理 5.2.4 如 果 特 征 函数 f 逐 点 收敛 于 特征 函数 f， 则 在 每 个 有 限 区 间 


[7T, 了 上 收 伍 是 一 致 的 . 
证 由 定理 5.2.3 知情 , 一 F. 设 a,beE C(F), 则 


a) = 101 = | sea 下 sea 





+ (Var Fa — F(a,b) + (Var F — F(a,D)). 
对 任意 给 定 的 。 > 0, 依次 取 绝 对 值 充 分 大 的 a 和 b 使 得 
Var FP — F(a,b] < 5 
对 于 取 定 的 a,b, 存在 Ni > 0, 当 n > Ni 时 ， 
Var Fa — Fla,b] < VarF — F(a,d] + 5 < 上. 
现在 只 要 证 明 当 n 充分 大 时 , 对 任意 te [--T,T| 一 致 地 有 
A 全 


b. b. 
| eitr7dF, (x) -| ei'zdF(z)| < 


€ 
ph 
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为 此 ， 对 区 间 [a, 9] 作 如 下 的 分 割 : a = Zm0 < Tml < < Tmm = b, 使 所 有 
的 zm; € C(F) 且 mw = 1 (Tmy 一 mmj-1) 一 0 ( 当 m 一 oo 时 )， 再 任 取 
6 € (zmj-1 Tmj]; 二 1,… ,m. 于 是 ,对 Yte[-7,T7], 


b. A 
| eitr dF (x) 一 >》, @itéi F(Zm,j-1) Tmj] 


j=1 


An < 








b ， i j 
[ eitzdF(z) Yes F(Tm,j_1, Tmjil 


j=1 


十 








m mm 
> eit65 本 (zm 1)Zmj] 一 > @ité; 下 (Zrm 1 Trmj] 


j=1 7=1 


十 








< 


Ms 


[Fn (Trmj1y Trmj] 一 下 (mL Trmjl| 
1 


+ Trm[Var Fr, + Var F), (5.2.6) 
其 中 最 后 一 个 不 等 式 利 用 了 le 地 一 ey| Tz 一 yl, Vt € [一 人 中 .注意 到 Var 到 一 
致 有 界 , 首先 选取 m 使 得 式 (5.2.6) 第 二 项 小 于 ef/4; 对 取 定 的 m, 必 存 在 N2, 当 


n > Na 时 , 式 (5.2.6) 第 一 项 小 于 c/4. 于 是 当 n > Na 时 式 (5.2.5) 对 te [开本 一 
致 成 立 . 上 


推论 5.2.7 设 fn 和 上 为 特征 函数 ， 若 fn f 且 tn—t€R, 则 fnltn) f(t). 


证 由 |fn(tn) 一 了 | |r(tn) 一 了 (tn)[ 十 [f(tn) 一 f(D), 由 定理 5.2.4 知 特征 函 
数 的 收敛 在 有 限 区 间 上 是 一 致 的 , 故 上 式 当 n 一 ce 时 趋 于 零 . 


定义 5.2.2 设 所 和 情 为 分 布 函数 , 称 
F(z)= | F(z -ydry) 
为 互生 的 卷 积 (convolution), 记 为 下 = 而 * 胞 . 
由 归纳 法 容易 定义 n 重 卷 积 F*03) = (Fo 也 1) * 厂 . 
对 每 个 固定 的 y, 本 (xz 一 y) 作为 z 的 函数 是 非 降 和 右 连 续 的 , 而 且 取 值 在 [0, 1] 


之 间 . 因此 由 控制 收 敏 定理 , 已 也 是 一 个 分 布 函数 , 进而 有 Var F = Var Fl: Var Fy， 
这 是 因为 


F(to0) > Pl2m) = | Fi(2m— y)dFa(y) 
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m m 
加 > Ma 一 
“J{ysgm/2} 2m— dFa(y) > A ( 2 ) f2 ( 2 ) ， 
令 mm 一 00 得 Var 下 之 Var 下 .Var 了 忆 ; 另 一 方面 ， 


oo 
VarF = lim | F(z — ydF2(y) 
TO0 一 CO 


. < Varll 三 dF2(y) = Var Fi : Var Fy. 
更 一 般 地 , 车 下 = Fx* Fz*…#* 所 ,, 则 
VarF = 1 var 已 . 
j=1 
命题 5.2.1 若 政 二 刻 #* 忆 , 则 了 = 所 :所 ;反之 亦 然 . 
证 设 政 = 下 * 避 ,一 00 <a<b<++0%, 取 [a,0| 的 分 割 点 为 a = xXmo < Ymi < 
“< Tmm 一 b 且 Tm 一 ] CR (Tmj — XZm,;_1) 一 0 ( 当 7 一 00 时 )， 则 由 积分 和 卷 积 
Sm 
定义 有 
b UA 
| esdF(z) = lim etmiF (pm,j 1, Lm 


j=1 


mm 
= nm, [> 2 ye WF (mm,j-1 — Y, Timj — Ye vdF2(y) 
了 一 


(J ram) ) ovarmty) 
其 中 最 后 一 个 等 号 利用 了 控制 收敛 定理 . 令 a -oo0, 5 -+co, 有 
[ear(y) = (eam(s)) ear(y) = (f(t). 


反之 , 设 f= 访 户 , 且 态 , 户 和 上 分 别 是 分 布 函数 万 ,入 的 特征 淆 数 .由 
上 知 五 * 刺 的 特征 函数 为 有 fo = 上 六 再 由 特征 函数 与 分 布 函数 之 间 是 一 一 对 应 的 ， 
故 记 x* 忆 二 下. | 


推论 5.2.8 (1) 分 布 函数 的 卷 积 服 从 交换 律 和 结合 率 , 即 
Pan * F2 一 Fo #1, 
天 1 * (Fs» 水 Fs) 一 (FI * Fy) 水 Fa. 


(2) 特征 函数 的 乘积 仍 是 特征 函数 . 特别 地 , 若 f 为 特征 函数 , 则 |fl? 也 是 特 
征 函 数 ，. 
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证 仅 给 出 (2) 的 后 半 部 分 断言 成 立 的 证 明 . 由 于 /的 共 氏 f 是 F(4+o0) 一 
F( 一 x 一 ) 的 特征 函数 . 直观 上 , 可 设 可 测 函 数 X 的 分 布 函数 为 ,对 应 的 特征 函数 
为 f, 则 -X 的 特征 函数 为 f, 这 是 因为 Eleit(-X)] = EleitX] = f(t). U 


在 以 后 关于 证 明 随机 变量 序列 收敛 性 的 命题 中 , 常 使 用 “对称 化 " 的 技巧 . 设 
X 的 分 布 函 数 和 特征 函数 分 别 为 和 f, 再 设 X' 是 与 X 独立 同 分 布 的 随机 变量 
(为 讨论 X 的 概率 性 质 , 可 以 在 另 一 个 概率 空间 (如 乘积 空间 ) 中 构造 X 和 XX”， 
所 以 可 以 假定 这 样 的 X' 存在 ). 令 Xs: 二 一 X', 称 其 为 X 的 对 称 化 随机 变量 , 则 
Xs 的 分 布 函数 为 Fx * F_x, 对 应 的 特征 函数 为 f(t) : f(t) = |fl2. 





5.3 ”随机 变量 特征 函数 的 初等 性 质 


以 下 我 们 主要 研究 随机 变量 特征 函数 的 性 质 因为 随机 变量 与 可 测 函 数 的 
区 别 仅 在 于 可 测 函 数 可 以 以 正 概率 取 值 无 穷 ， 故 可 测 函 数 对 应 的 分 布 函数 满足 
下 (一 00) > 0, (+00) < 1 而 FF(-00) 和 1 一 (+o0) 分 别 为 可 测 函 数 取 值 一 co 
和 十 oo 的 概率 , 对 随机 变量 而 言 , F(-00) = 0, 已 (+co) = 1 即 Var 互 =1 所 以 为 简 
洁 起 见 , 我 们 仪 研究 (0) = Var F = 1 的 那 种 特征 函数 , 即 随机 变量 的 特征 函数 . 


5.3.1 特征 函数 的 一 般 性 质 


设 X 为 随机 变量 , 车 P(X < z) = P(X > 7x),Yzxe 民 , 则 称 基 为 对 称 的 , 
性 质 5.3.1 (1) |f(D| < 1, f(-t) = 7 (6); 


(2) 设 wb e 民 , 若 随 机 变量 X 的 特征 函数 为 f, 则 a 十 bX 的 特征 函数 为 
eite f(bt), 特别 -XX 的 特征 函数 为 户 


(3) 车 随机 变量 X 的 特征 函数 为 f, 则 f 是 实 的 充分 必要 条 件 是 X 为 对 称 随 
机 变量 ; 
(4) 特征 函数 的 凸 组 合 仍 是 特征 函数 , 即 若 六 aj = 1 aj > 0, 7 = 1 yn 
JI=1 


及 ,… ,所 为 特征 函数 , 则 并 ajf; 为 特征 函数 
j=1 
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性 质 (1) ~ (3) 由 定义 即 得 , 而 性 质 (4) 可 由 命题 5.1.1 得 出 . 
性 质 5.3.2 若 尺 为 纯 离 散 型 分 布 , 即 


F(z) = DPr lr,00) (7), 
k=1 
则 对 应 的 特征 函数 为 f(t) = 六 pkeitzx. 特别 地 , 若 严 为 格子 点 分 布 , 则 
k=1 


Oo 
f0#) 一 eita Dp eitnxh 


天 一 1 
其 中 zi = a 十 nxh. 如 果 玉 只 有 一 个 跳跃 点 , 则 称 为 退化 分 布 . 当 t= 2 至 时 ， 
27 i2nxnx 
-| 











这 一 性 质 也 刻画 了 格子 点 分 布 , 即 有 
命题 5.3.1 f 为 格子 点 分 布 的 特征 函数 的 充分 必要 条 件 是 存在 实数 to 关 0, 使 
[f(to)|=1. 
证 必要 性 由 性 质 5.3.2 得 到 . 下 面 证 充分 性 . 设 |f(to)| = 1, to 关 0, 则 存在 实 
数 9, 使 f(to) = eto4, 即 
厂 eitozdF(z) 二 eito9 或 三 eitotz 一 6)dF(Z) 一 工 . 


两 边 取 实 部 得 
| 4 — costo(z — 0))dF(z) = 0. (5.3.1) 

由 于 1 一 costo(x 一 9) 连续 有 界 非 负 , 故 若 式 (5.3.1) 成 立 , 只 能 当 已 是 纯 离散 分 布 ， 
且 它 的 不 连续 点 包含 在 1 一 costo(z 一 0 的 零点 中 . 由 此 知 的 不 连续 点 必然 在 
{0 + 2xk/to,k € Z} 中 . , 

命题 5.3.1 蕴涵 了 对 非 退 化 分 布 的 特征 函数 必 有 |f(t)| < 1, a.e.. 车 f(t) 非 退 
化 , a < 0, 则 [f(t)]* 不 可 能 为 特征 函数 , 故我 们 还 可 以 得 到 : 特征 函数 的 倒数 仍 为 
特征 函数 的 分 布 只 能 是 退化 分 布 . 

推论 5.3.1 若 存 在 不 可 约 的 非 零 实数 二 和 tz, 使 |f(t1)| = |f(t2)| = 1 则 
jb 三 1 即 请 是 退化 分 布 的 特征 函数 . 
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由 分 布 函数 的 Lebesgue 分 解 , 我 们 可 以 导出 如 下 对 应 的 特征 函数 的 分 解 . 
性 质 5.3.3( 特 征 函 数 的 Lebesgue 分 解 ) 车 


3 
F=QalFact+aQa2Fs +asFa, Qo; 之 0, dja = 1, 
j=1 


其 中 Fc, Fs 和 Fu 分 别 为 绝对 连续 , 奇异 连续 和 阶梯 分 布 , 则 对 应 的 特征 函数 有 如 
下 分 解 : 
f= Q1 fac 十 Q2fs 十 Qsfa. 


注 1 车 as = 1, 则 了 是 纯 离散 分 布 的 特征 函数 , 其 特点 是 对 每 个 ge (0,1), 存 
在 无 穷 多 个 t, 使 |f(t)| > 1 一 6, 因此 


limsup|f(t)| = 1. 


全 一 co 
若 al = 1, 则 f(t) 是 绝对 连续 分 布 的 特征 函数 , 由 Riemann-Lebesgue 引 理 有 
lim f(t)=0. 
| 引 一 oo 
车 aa = 1, 此 时 f(t) 不 必 趋 于 0, 故 


limsup|lf(t)| =L, Le(0,1). 
| 


t|—00 
5.3.2 与 特征 函数 有 关 的 不 等 式 性 质 


性 质 5.3.4( 加 们 不 等 式 ) 设 f 为 特征 函数 , 则 


Re(1 ~ f(t)) > 坟 Re(l _ f(2°)). (5.3.2) 
证 由 
1 — costx = 2 sin? > 2 sin? cos? = 3 sin? tz = i0 一 cos 2t7) 
得 
Re(ll — f(t)) = [a — costz)}dF(z) 
之 if 0 — cos2tx)dF (zx) = 了 Re — f (2t)). 
再 由 归纳 法 即 得 结论 . I 
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命题 5.3.2 设 当 | 上 > B 时 , 70 和 A4<1, 则 对 Vlt|<B, 有 





1 — A2)t2 
HI<1- 5 往往 ， 
证 对 (DP 应 用 式 (5.3.2) 得 


1 OF > 专人 -Ing) 


(5.3.3) 


对 任意 固定 的 lt < B, 取 n 使 2-"Bg|t<2-m-0B, 即 Bg2"|t| <2B, 由 推论 


条 件 知 |f(27t)| < 4, 而 4-? > 如/(4B?), 故 由 式 (5.3.3) 有 


£2(1 — A2) 
4B2 


当 |z| <1 时 , V1 一 x <1-7x/2, 故 结合 上 式 得 


1 一 [AbDP > 


#2(1— A2)1'® t2(1 — A?) 


命题 5.3.3 如 果 特 征 函 数 f 满足 Cramer 条 件 (C), 即 


limsup|f(t)| < 1, 
上 


| 一 oo 


则 对 任意 e > 0, 存在 ce (0,1), 当 所 >e 时 ,有 1/ 的 | < ec- 


证 由 Cramer 条 件 (C), 存在 正常 数 A4<1 和 B, 当 |t|>B 时 |f(t)| < 4h. 由 


推论 5.3.2 知 对 任意 ce>0, 当 e<| 上 <B 时 ,有 


12(1 — A?) cz(1 - 42) 
OS TB <l 8B 


令 c=max{A,1 一 e2(1 一 A2)/(8B?)} 即 得 本 推论 . 


性 质 5.3.5 若 f(t) 是 非 退 化 分 布 的 特征 函数 , 则 存在 正 数 6 和 e, 使 当 贞 科 5 


时 , 有 
|f()| < 1— et?. 


四 272 2 2 
证 由 1-costz> 二 (1- 纵 ) 知 





Oo 
oo 


1- Re f(t) = [[ (1 — costz)dF (zx) 
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t2m2 t27 
> 一 
本 hi 2 (1-5 人 dF(z) 


11 
宕 一 zdF(z). 
24 inc” (2) 


由 于 五 非 退 化 , 故 存在 6 > 0, 使 


一 2 
c= J zdF(x) > 0， 


所 以 当 |t| < 65 时 1 一 Re f(t) > 1let2/24. 把 Re f(t) 换 成 |f(t)|?, 经 过 简单 运算 即 


得 所 需 的 不 等 式 . 
性 质 5.3.6( 增 量 不 等 式 ) 对 任意 t,he RR， 
1 的 一 7G 二 人 < 2(1 ~ Re 7P)). 
证 设 随 机 变量 X 对 应 的 特征 函数 为 1, 则 
1 的 一 JE 二 门 | =|Ele xX] — Ele+1x]| 


< Ele'*(1 einx)| Ell — enx| 


=2 三 (1 — coshz)dF'(z) = 2(1 — Re f(h)). 


性 质 5.3.7( 积 分 增 量 不 等 式 ) 对 每 个 te 展 和 hh > 0, 我们 有 











1 
元 人， fdul < SQ +Re f(A) 
证 由 sm in2 2 < = 530+ ) 知 
7.2 一 2122 S1 5 CDS DS cos2? 5 COSU 
二 fy sh fr” 








= 1 we dF(z) pe iue di 
= [es sD Eqp(z)| < <( 厂 a arG)】 


<(3 _ Qt+ ooshajdFGn 
2 





1/2 





(1 + Re f (1))22. 
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性 质 5.3.8( 积 分 不 等 式 ) 对 任意 上 > 0, 存在 正 连 续 函 数 m(t) 和 M(t), m(t) < 
M(t), 使 


mW Ref < 三 [de 2) 
< MO 0- Re f(au. (5.3.4) 
车 t 充分 小 , 还 有 
oo 2 t 
[zdr() < -MO fog(Re f(wW) du. (5.3.5) 


证 首先 证 明 对 任意 t 关 0, 存在 正 连续 函数 m(t) 和 M(t), m(t) < M(), 使 得 








1 sintz\ 1 十 22 1 
一 一 一 未 1 一 乏 一 一 ， 民 . .3. 
0 < 上 人 ( 1 ) 2 元 而 < 十 oo， ZE {5.3.6) 


事实 上 , 当 |z| < 1 时 , 由 1 一 (sintz)/(tz) 系 妇 z2/6 得 


sintr \ 工 十 22 < 时 lt 
岂 | (0 -3 7 6 (1+2°) < < 了; 





当 |z| 这 1 时 , 由 (1+z2)/z2 <2 知 


int 1 
站 (4 _ sin = 十 22 < 2 
2 





tr 
令 1/m(t) = max{|t/3,2|t|}, 即 得 式 (5.3.6) 的 右 半边 不 等 式 . 再 讨论 左 半边 不 等 








式 . 当 |zt| < 2 时 ， 

Sin tz t27? t272 t272 

1 > 1 之 ， 
tr 6 20 30 
所 以 ， 
sintz\ 1 工 十 代 1 

ti {1 > 一 | 引 . 

邮 ( tz ) Z2 30| | 
当 |zt| > 2 时 ， 





和 2 
取 1/M(t) = min{|t/30, | 二 /2}, 则 式 (5.3.6) 的 左 半边 不 等 式 成 立 . 
由 不 等 式 (5.3.6), 我 们 有 


sintzAN 1+2z2 1 
(1 加) > 3 


fa 一 Re f(v))du = 「 du | ke — cosuz)dF (zx) 
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一 [-, dF'(zx) fa — cos uz)du 


sintzAN 1+2? x? 
一 . dF 
= 上 :( 2 ) 2 工 十 2Z2 (zx) 





a 本 oo 工 re 

同 理 可 证 式 (5.3.4) 的 另 半边 不 等 式 . 为 证 式 (5.3.5), 只 要 注意 到 当 a e (0,1) 时 有 
不 等 式 1 一 a < 一 loga 即 可 . 

性 质 5.3.9( 截 尾 不 等 式 ) 对 任意 t+ > 0， 

3 
a TdF(z) < (1 ~ Re f(t)), (5.3.7) 
| dF(z) < 7 「a Re fw)du (5.3.8) 

{|z|>1/ tJo . 人 
当 充 分 小 时 , 可 把 上 式 中 的 1 - Re f(w) 换 成 -log(Re f(w)). 


证 首先 ， 
1 一 Re f(t)= — costz)dF (x) 


tx t27 
{lol<1/t} 2 (5 条 ) aa 


11 ， 


一 2 
二 24 Jz}™ dF (oh， 


移 项 即 得 式 (5.3.7). 又 
fa 一 Re f(wW)du = ! -上 du [、 (1 — cosuzx)dF (x) 


=- (- - 衬 押 ) dF(z) 


> (1 — sin1) | dP(z) > 





1 
了 Jrye 4 人 
注 2 关于 式 (5.3.8), Doob 得 到 另外 一 个 结果 : 对 V5 > 0， 
(1 十 2rt/6)? 
fi dF(Z) < 人 了 (1 — Re Fu))du (5.3.9) 
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例 5.3.1 证 明 若 特 征 函数 f, 一 9g, g 在 t=0 处 连续 , 则 9g 在 民 上 连续 . 
证 由 性 质 5.3.6 及 g 在 t=0 处 连续 , 有 
Iglt+h) — gOP= lm |fa(t+h) — fa(OP 
< lim 2(1 — Re fn(h)) = 2(1 — Re g()) » 0 (h— 0), 

故 g 在 民 上 连续 . 4 

例 5.3.2 证 明 若 对 某 个 全 > 0, 访 全 一 Lv 人 < 则 在 到 上 户 一 上 

证 对 | 寻 <T 并 ,由 性 质 5.3.6 得 

[fn(22) — fa (DP < 2(1— Re f(t)) 一 0， 

故 所 (2t) 一 1 即 f(t) 一 1, Vt| < 2T. 由 归纳 法 即 知 对 及 上 和 任 一 点 t 都 成 立 , 改 
fn(t) — 1,vteR. 

有 趣 的 是 本 例 利用 实 变 函 数 的 一 个 结论 可 以 作 进一步 的 改进 ， 设 4 为 一 个 
Lebesgue 可 测 集 , 其 测度 L(A) > 0, 令 

B={z—y: zr,y€ A)}, 


则 存在 工 > 0, 使 (-T,T)c B. 由 此 结论 例 5.3.2 可 以 改进 为 : 如 果 访 在 一 个 具有 
Lebesgue 正 测度 的 集合 4 上 收敛 于 1, 则 在 民 上 i 收敛 于 1. 这 是 因为 对 te 4， 
万 (- 昨 = 天 人 昌 一 11= f(0) 2 |f()| 一 1 所 以 可 以 假定 集合 4 关于 原点 对 称 且 
包含 原点 . 故 当 三 , 妇 EA4 时 ,有 





[falti —t2) — fn(t)hP < 2(1— Re fn(-t2)) 一 0， 

于 是 所 (tz 一 本) 一 1, 从 而 推 知 收 全 点 集 为 另 = {ti 一刀 :ti1,t2 € A}. 由 上 实 变 函 
数 的 结论 可 知 改进 的 结论 成 立 . 4 

例 5.3.3 设 {Xn,n 之 1} 为 (2,w,P) 上 的 一 列 随机 变量 , 若 对 某 个 全 > 0， 
Xn 依 概率 收敛 于 某 个 随机 变量 X. 

证 对 Ve>0, 在 式 (5.3.9) 中 取 t= 1/e 6 = 了 ， 

supP (Kut ~ Xo > ©) < sup P+ EY fl patun( dat = ol1), 

故 {Xn,n 之 1} 是 依 概率 收 化 基本 列 , 从 而 结论 成 立 . 4 
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5.4 特征 函数 的 微分 性 质 及 其 与 对 应 分 布 矩 的 关系 


定义 5.4.1 设 h(w) 为 任 一 函数 , h(w) 关于 增 量 上 的 天 阶 中 心 差 分 由 下 式 定 义 : 


Aih(u) = Aih(v) = h(u +t) —h(u 一直， 
Akrih(u) = A'(AEh(W)), kl1. 


由 归纳 法 易 证 


Atih(u) = Y (1)* () h(u + (n — 2k)t). (5.4.1) 


k=0 
特别 地 , 取 h(w) = ei”*, 我 们 有 


At el" 一 eizv(eizt — eist)n ~ eiev (2isin zt)". (5.4.2) 


定理 5.4.1 设 f 是 分 布 函数 玉 的 特征 函数 , A$,f(0)/(2t)* 是 f(t) 在 原点 的 
2k 阶 中 心 差 商 . 如 果 
Asxrf(0) 
(2t)2* 
则 互 的 2k 阶 矩 存在 , 此 时 对 所 有 的 te 展 及 s = 1,2,… ,2k, 了 (3(t) 存在 , 且 





M EE lim inf 
t 一 0 





< co， 





js) 人 (一 这 户 zseitzdF(z) Sims, s=1,...,2k. 
一 Co 


(5.4.3) 
证 由 式 (5.4.1) ， 


ASef (u) = 三 eivz(2isin zt) dF (zr), 


故 在 原点 的 差 商 为 
ASxf (0) 
(2¢t)2* 











= [、 (Ee2) dF(z). 


由 Fatou-Lebesgue 引 理 ， 


。 2k 
ce /sinzt 
M = lim ipf | (SE ) dF(z) 
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> | mm 人 到 dF(z) 

一 = zdF (x) = 一 Mok. 
由 此 知 玉 的 s (1 < s< 2k) 阶 矩 存在 . 由 控制 收敛 定理 , 在 f(t) = [ei*dF(x) 
中 两 边 分 别 对 t+ 求 s 阶 导 数 , 再 令 上 = 0 即 得 式 (5.4.3). 


推论 5.4.1 设 分 布 函数 已 的 特征 函数 在 t=0 点 有 天 阶 导数 . 若 上 为 偶数 ， 
则 玉 有 直到 上 阶 的 矩 ; 若 大 为 奇数 , 则 玉 有 直到 一 1 阶 的 甜 . 


下 面 的 例子 是 由 Zygmund (1947, p.272) 给 出 , 该 例 说 明 推 论 5.4.1 中 的 结论 不 
可 改进 . 
例 5.4.1 设 X 为 随机 变量 , 其 概率 函数 为 


. 1 
P(X = +j) = 2c721og7， 


其 中 c= 半 (2log 力 -2 则 X 的 分 布 函 数 下 为 





er 
F(z) = = > 1 (Tj,00) (2) + IT-s,00) (2)), 
其 对 应 的 特征 函数 为 
-这 影 
可 以 证 明 f'(#) 存在 且 对 t 连续 , 特别 f(t) 在 0 点 存在 且 连 续 , 但 F(z) 的 一 阶 矩 
不 存在 . 4 


推论 5.4.2 若 分 布 函 数 FP 的 s 阶 矩 ms 存在 (s 为 正 整 数 ), 则 F 的 特征 函数 
了 可 以 微分 s 次 , 且 


fH = 广 zse'trdF (x) 
是 t 的 连续 函数 . 


证 当 s 为 偶数 时 结论 前 面 已 证 明 , 故 只 要 证 当 s = 2k 十 1 时 结论 成 立即 可 . 
为 此 , 设 
5= | lzPeradF(z) < oo， 
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则 对 任意 给 定 的 。 > 0, 存在 ao > 0, 当 a> ao 时 ,有 


| lz|2*+ldF(z) < e. 





又 因为 
A wo fi 2k+1 
季 0 = (22) dF(z) 
gp me) az ) 
呈 oes + Joos ( t 加 
由 控制 收敛 定理 ， 





sin zt 2k+1 
, dF(zx) = 2+1d F(z). 
加 人 人 ) (2) cw” (2) 


利用 |u-1sinw| < 1, Yu € 及 , 可 知 


[ sin zt N 2*+1 dF(z) <| 
{lzl>a} \ J{lz|>a} 





[zl tlidF(z) < e. 

















故 
， A2k+if(0) :28 十 1 sin ztN 28+1 
多 | Cnr i ja dF(z) < 
即 
1 CO 一 zerradP(o| <e 





令 a 一 00, 再 令 e 一 0 即 得 


f +1) (0) = i2k+1 [三 zt1dF(z). 





对 一 般 的 wu, 我 们 有 
At oo in wt \ 2kT1 
a 一 j2K 十 1 人 eiuz (3 ) dF'(z). 
重复 上 面 讨论 可 得 


f 2+) (w)  j2k+1 广 eivzz2k+1dF(z)， 
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下 面 证 明 f(2*+0(t) 是 t 的 连续 函数 . 注意 到 
[f(D (t+ h)— fe28+1)(¢) )| = _ fo eitz( eizh 1)z2k+1dF(z) 
< J eiza — 1| .zl2k+ldF(z) + A dra) 
< joc, ,le eish 一 1| :jzl2e+ldF(z) + 2e 
— 2¢ (h — 0). 
最 后 一 步 利 用 控制 收敛 定理 . 再 令 e 一 0 即 得 f(2*+D(t) 是 二 的 连续 函数 . 
由 定理 5.4.1 还 可 得 如 下 推论 . 
推论 5.4.3 设 f 是 分 布 函 数 下 的 特征 函数 , 若 对 偶数 子 序列 {2nx,k € N}， 


As f(0) 
(Qt)2ns 





Mi 全 lim inf < 十 co， keEN, 








则 己 的 所 有 阶 抢 都 存在 且 f(t) 可 对 实数 上 微分 任意 多 次 , 此 时 有 
JO = | zeetedF(o) 


由 推论 5.4.3 知 , 若 分 布 函数 玉 对 应 的 特征 函数 /的 所 有 阶 导数 在 原点 存在 ， 
则 FF 的 所 有 阶 矩 都 存在 . 


值得 注意 的 是 特征 函数 可 以 处 处 没有 导数 , 例如 


1(0) = 5 sar exp{itst), 
k=0 


这 是 具有 如 下 概率 分 布 的 随机 变量 X 的 特征 函数 


P(X =5*)=27(K+D), k=0,1,.... 
设 分 布下 的 前 n 阶 和 矩 存在 ,FF 对 应 的 特征 函数 为 f, 则 了 有 Maclaurin 展开 : 
f(t) = > 全 ) ss + Rn (t), (5.4.4) 


其 中 余 项 
Ra) = 二 [fo(6b — f 0)]t", ge (0,1). 
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由 定理 5.4.1 得 ，， 
f(t) = ty + Ralt). 


j=0 





由 此 , 我 们 可 以 得 到 分 布 函数 的 矩 和 对 应 特征 函数 的 Maclaurin 展开 之 间 有 如 下 
关系 . 


定理 5.4.2 设 分 布 函数 下 的 n 阶 甜 存在, 则 忆 的 特征 函数 六 有 展开 式 : 


j 昌 =1I+》 cj +o(t") (t— 0). (5.4.5) 
j=1 
反之 , 车 特征 函数 /有 展开 式 (5.4.5), 则 当 n 为 偶数 时 , 已 有 直至 ” 阶 的 矩 ; 当 n 
是 奇数 时 , 下 有 直至 n 一 1 阶 的 矩 , 此 时 ， 


Ty 

一 一 
ci; 二 rl 
27: 


. Nn 
j=1,2,...,2 [| 

证 定理 的 前 一 部 分 已 在 推论 5.4.2 中 证 明 , 故 只 需 证 明 后 一 部 分 . 设 f(t) 有 
展开 式 (5.4.5), 我 们 知道 F 的 阶 矩 与 & 阶 中 心 差 商 的 下 极限 有 关 , 因此 可 由 公 
式 (5.4.1) 来 计算 At (0), 这 就 给 出 了 的 一 个 徊 次 的 展开 . 容易 看 出 , 展开 式 中 常 
数 为 0, 故 

A5J(O) = >》 cyAti +o(t") (t— 0), 
j=1 
其 中 
A; 一 (1 (%) (n=2x), 7 = 1,.… ) ?2 


且 当 j++n 为 奇数 时 4; = 0. 由 归纳 法 , 可 以 证 明 
下 Rs 0， l<s<n 
2 ) (人 -1 (—1)”n!, s=n, 


了 


A4 (0) = Dow Dy) PO) Ca rae 


k= {l=0 


Ga (om ew) k 


k=0 


n 





+ o(t”) 


37=1 
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= (it)"en(—2)" 1)"nl + o(t") = i"(2t) "nlen + o(t"). 


故 当 n 为 偶数 时 ， 
?mn = lim Anf(0) 
的 t—0 (2t)" 
即 ci = mn/n!. 而 此 时 fw(0) 的 存在 等 价 于 lim A%f(0 )/(2t)”* 的 存在 , 从 而 由 定 
理 5.4.1 得 出 FF 的 n 阶 矩 存在 . 当 n 为 奇数 时 ， lim A 了 (0)/(2t)”* 的 存在 并 不 能 推 
出 五 的 m 阶 矩 存在 . I 


下 面 的 反例 说 明 在 定理 5.4.2 中 , 当 n 为 奇数 时 由 式 (5.4.5) 并 不 能 推出 到 的 
n 阶 和 矩 存在 . 


例 5.4.2 设 





一 这 mlcn， 


C 
D(Z) = 0g { 


其 中 是 正则 化 常数 以 使 p(z) 为 概率 密度 函数 . 设 下 为 p(x) 对 应 的 分 布 函数 ， 
由 于 


|z|>2}; 


[一 Zlogz ——dx = loglog A ~ log log 2, 
故 互 没有 正 整 数 阶 矩 , 但 对 应 的 特征 函数 为 


jb 一 2c 广 


2 x2logzx 


costz 





此 时 ， 








1— f(t 1— t 
f(t) 加 广 costz | 
2 x2logz 
= ] 一 cositz + 六 1 一 cos tr 
2 logz 4 1/t 22 logZ 


因为 1 一 f(t) 是 一 个 实 的 且 非 负 的 偶 函 数 , 对 任意 实数 t, 我 们 有 


dz. 








0 <1— cost < min{2,t2}, 


1- f(t) .2 rut 1 wm 1 
二 -二 一 
交 <2] dz+2 


一 一 -一 qz 
2 logz /t X21logz 


1/vt 1 1/t 1 2 ce 1 
二 12 
<t 1 ingzdz +t jas 已 :dz logt hi 2 de 
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2 1 Nl 2 

log2 Vi (也 ) t logt S 4 
即 1 一 f(t) ==o(t) (1 一 0). 此 时 f(t) = 1+o(t) 有 定理 5.4.2 的 形式 (n= 1, cl = 0)， 
但 FF 的 一 阶 矩 不 存在 . 4 


关于 非 整数 阶 和 矩 和 对 应 特征 函数 的 关系 , 我 们 有 如 下 的 定理 . 
定理 5.4.3 设 如 rs 会 三 lz|"+sdP(z) < co. 如 果 0<65<1 则 


logt#|’ 





5 





f(t) = Sm +p (t)，t eRR, (5.4.6) 
其 中 
pl) = (ee) 
= ma + o(t") = pm, 9| <1. (5.4.7) 
如 果 0<6<1, 则 
pn 人 = mn + 21760' jn4s [I 入， ey I Ig&1. (5.4.8) 


证 由 定理 5.4.2, 我 们 知道 展开 式 (5.4.6) 中 的 主 项 是 成 立 的 , 因而 只 要 证 明 
pn(t) 有 表达 式 (5.4.7) 和 (5.4.8). 在 积分 余 项 公式 


nl ,大 1 n( _ nl 
gz Zz z*(1— wu) zt 
“= +h me 
k=0 
中 , 令 z = itz, 得 


10 = Dm 


Oh 


ji et?u dw, (5.4.9) 











n(t) = pe Di) (人 一色) tv | Ze 一 1)d 严 (z) 十 7 mn 
会 ri,(t)} + 人 mn (5.4.10) 
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由 控制 收敛 定理 ( 因 FF 的 ” 阶 矩 存在 )， 
jm (1 — w)™- ‘quf zx eitzu _ 1)dF(z) 
= 下 (一 四 "ldu ， zlim(ete" — 1)dF(z) =0, 


" ( 边 ” 
二 +o(t”). 





再 由 式 (5.4.9) 得 ) 
n 1l—% nn 
pn(t)=t 「 Tf (tu) du 
且 
mmO=| -or 人 areerapa 


| 1 n—l n uy 
< mm) (一 功 auf lz dF(z) = pn 


因此 存在 0, |9| < 1, 使 
至 此 , 我 们 证 明了 式 (5.4.7). 最 后 证 明 p(t) 用 表达 式 (5.4.8). 设 0<5<<1, 由 于 


leia 1| 一 le 1 , lei® 1 < 21-5|als, 





1 (1 — wl . 
/i i 2 (etzv 1)du 


2 TOD - 2 一 ?jz 
T(t+1+6) (1+6)...(n+6). 


于 是 式 (5.4.10) 中 的 余 项 rn 人 满足 








加 1 (1 wu)™-! 
< 21 Sltzxls | Dr 


人 tm+5 
(1+6).. (n+o) 
证 毕 . 有 

最 后 我 们 不 加 证 明 地 引述 以 下 几 个 更 精确 描述 分 布 函数 的 矩 和 对 应 特征 函数 
之 间 关 系 的 结果 , 它们 可 以 在 Kawata (1972) 一 书 中 找到 . 


rn(t) = 0 pn+s2! I0|<1 
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定理 5.4.4 设 关 为 随机 变量 , 满足 BIXP+7 < oo,0<r<1, 其 中 nn 为 非 负 
整数 . 


(1) 车 0 <r<1 则 ElX|l*t" < ee 的 充 要 条 件 是 存在 6>0, 当 |t| <5 时 ， 
f (1) = Qn(t) + OT), 
其 中 Qalt) 是 的 复 系数 nn 次 多 项 式 , w(b) > 0, 且 | GO/ 全 di < oo, 此 时 ， 


xr 2 (Dre 
x 三 tmtrth)Re (f(t) — Q(t)) dt. 
(2) 也 XI2"+1 < oo 的 充 要 条 件 是 存在 6 > 0, 当 和 前 < 6 时 ， 
flt) = Qn(t?) + O(N™T TE)), 


其 中 罗 () 之 0, 且 fiw dt < co, 此 时 ， 





LT(2n+2) roeo 
EIX|2"+! 一 ( 1)™+! f 


一 De 


t- (2%+2 Re (f(t) — Qn (t2)) dt. 


由 定理 5.4.2, 如 果 对 一 切 m 关 1 EIXP < oo, 则 f(t) 在 0 点 附近 有 任意 nn 阶 
的 Taylor 展开 . 一 个 自然 的 问题 是 Taylor 展开 的 半径 R 有 多 大 ? 我 们 有 如 下 的 
结果 . 


定理 5.4.5 若 对 一 切 n>1,pn=BXlI"<o 及 














n/ nn 1 
lim sup pn < co， 
no00 nn R 
则 当 忆 < 有 BR 时 ， 
~ (iD 
f(t) = > Mn (5.4.11) 
n=0 
证 设 0<to<R, 由 Stirling 公式 nl ~ (n/e)”*V2nn, 我 们 有 
7, nj tt? 
lim sup 人 < 二 一 全 lim sup 也 0 <1 
了 一 OO 0 也 一 Ce 





1/n 
ta 
一 全 lim sup (所 1 <1, 
n 


和 一 CO 
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故 祝 级 数 习 mat8 /nl 收敛 ,因此 当 | 上 才 系 如 时 ， > mn (让 )”/n! 收敛 , 但 由 定理 5.4.3， 
n=1 nn 


一 1 





其 中 


故 当 | 上 < RR 时 , 式 (5.4.11) 成 立 . L 
由 表达 式 (5.4.9) 和 (5.4.10) 不 难 推 出 
推论 5.4.4 对 vse 有 RRR， 


用 天 _ so)k oo - ip 人 (ft — sm 
10= DH seraple) 二 和 mt 由 


pr k! nl! 
其 中 rnt 一 s)| 世 2pn, 且 当 t 一 s 一 0 时 rn(t 一 5s) 一 0. 
我 们 知道 分 布 函数 和 特征 函数 是 一 一 对 应 的 , 而 {mn,n > 1} 是 由 FF 所 唯一 


确定 的 . 现在 反 过 来 间 , 如 果 {m,n > 1} 是 某 个 随机 变量 的 一 列 整数 阶 矩 的 序列 ， 
它 能 否 唯 一 确定 F? 更 精确 的 提 法 是 , 如 果 FF 和 G 都 是 随机 变量 的 分 布 函数 , 且 


三 zmdF(z) = 厂 x"dG(z), Vn>1, 


问 是 否 有 下 = G? 如 果 对 和 矩 不 加 任何 限制 , 则 回答 是 否定 的 (见习 题 ). 下 面 我 们 利 
用 特征 函数 性 质 给 出 该 问题 的 一 个 充分 条 件 ， 
定理 5.4.6 设 随机 变量 X 的 分 布 函数 为 F, 对 一 切 n > 1, pn = ElX|l"<o. 


如 果 
WI 
nN 








lim sup 

则 {m,n > 1} 唯一 确定 FF. 
证 由 定理 5.4.5 知 , 存在 to > 0, 对 一 切 |t| < to, f(t) 有 Taylor 展开 式 : 
f(t) = 二 6- 


即 当 | < to 时 {m,n 之 1} 唯一 确定 了 特征 函数 f(t). 取 se 民 , |s| < to/2, 由 推 
论 5.4.4 知 , 当 |t 一 s| < to 时 ， 


f(t) = > (pens) 


< 十 o0， 
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由 {mm,n 之 1} 唯一 确定 . 因此 , 当 |#| < 3to/2 时 f(t) 由 {mw,n > 1} 唯一 确定 . 继 
续 这 一 过 程 知 , 对 一 切 t € 民 , {mn,n > 1} 唯一 确定 了 f(t). 由 于 /与 政之 间 的 一 
一 对 应 , 因此 {m,n > 1} 也 唯一 确定 了 开 . I 


5.5 ”特征 函数 的 判别 准则 


由 前 面 讨论 我 们 已 经 看 出 一 个 随机 变量 X 的 特征 函数 f 实际 上 就 是 久 分 
布 函数 的 Fourier 变换 . 关于 随机 变量 的 收敛 性 质 , 分 布 函数 矩 的 性 质 都 可 以 通过 
对 应 的 特征 函数 来 加 以 研究 . 我 们 知道 函数 忆 单调 非 减 、 右 连续 且 F(-o0) = 0， 
有 (+oco) = 1 刻画 了 分 布 函数 , 现在 感 兴趣 的 问题 是 如 何 来 刻画 特征 函数 . 逆转 公 
式 提供 了 刻画 特征 函数 的 一 种 方法 , 但 是 这 种 方法 往往 是 理论 上 的 , 在 实际 上 行 
不 通 . 因此 有 必要 给 出 用 以 决定 一 个 给 定 的 函数 是 否 为 特征 函数 的 准则 . 

首先 , 由 特征 函数 的 初等 性 质 ; |j 鸭 | 和 0) = 1, 7- 有 = f(t) 及 在 有 限 区 间 
上 一 致 连续 知 一 个 函数 为 特征 函数 必须 满足 这 些 必要 条 件 , 但 这 些 条 件 不 充分 . 为 
说 明 这 一 点 , 我 们 有 

定理 5.5.1 设 f(t) 为 特征 函数 , 满足 f(t) = 1 十 o(&2) (t 一 0), 则 (#2) 三 1. 

[、 z2dF(z) = 0, 

因此 FF 在 每 个 不 包含 原点 的 区 间 上 是 常数 , 即 当 z <0 时 F(z) =0, 当 x>0 时 
f(z) = 1. 由 此 知 f(t) 三 1. 

例 5.5.1 e-* ,1 一 4, cos?t 都 不 是 特征 函数 . 

推论 5.5.1 设 w(t) = o(t) (1 一 0), w( 一 引 二 一 w(), 车 特征 函数 了 满足 

f(t)=1+wt) +o(t) (to— 0), 





则 fC) 1. 


证 因为 f 为 特征 函数 , 所 以 |f(W)l? 也 是 特征 函数 .注意 到 此 时 |f(t)l? = . 
1 十 o( 如 ), 由 定理 5.5.1 知 |f(t)|?2 三 1, 从 而 f(t) = eita, 其 中 为 实数 , 故 


1 
f(t) =1+iat— 20 6 + o(#2). 
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再 由 条 件 at = olt) 得 a =0, 于 是 /和 =1+o(t2), 因此 f(t)=1. 和 

定理 5.5.2(Bochner-Khinchine) 实 变量 t 的 复 值 函 数 f 是 特征 函数 的 充分 必 
要 条 件 是 : 

(1) f(0)= 1; 

(2) ( 非 负 定性 ) f(t) 在 民 上 连续 县 对 任意 n EN 及 nn 个 实数 二 ,… ,th 及 恨 上 
的 实 变量 复 值 函 数 h(t), 有 


DD fp — ty) h(te)hlt;) > 0. (5.5.1) 
天 一 1 7 一 1 
证 必要 性 设 了 为 特征 函数 , 则 已 证 明 过 f(t) 是 t 的 连续 函数 及 f(0) = 
对 任 给 的 ne N 及 任 给 的 n 个 实数 石 ,… ,tn, 有 


> > f ltr —t;) h(tr)h(ts) 


k=1 j=1 


= eilte ti zd F(z) h(te)h(t;) 


k=1 j=1 


二 | (> set] 芭 i) dF(z) 
k=1 j=1 
上 k=1 


充分 性 (这 个 证 明 是 Pathak 于 1966 年 给 出 的 ) 令 f(t) 连续 , f(0) = 1, h(t) = 
exp{ 一 让 一 如 02}, 其 中 z ce 民 , o? > 0. 由 式 (5.5.1), 不 难 证 明 
ff) exp{-ilu -wz (w+)?}dudv >0, (5.5.2) 


这 是 因为 积分 式 (5.5.2) 可 以 用 形 如 式 (5.5.1) 的 和 式 逼 近 . 令 t= 一 vs 二 十 多， 
则 式 (5.5.2) 中 的 v2 +ao2 = ( 妇 +s2)/2, 对 s 积分 得 


2 
itezh(ti)| dP(z) 关 0 








1 ro t202 
全 一 一 itz — 一 一 > 0. 
g(x,0) ps [， f(t) ep{ itz 3 } dt 之 0 


注意 到 exp{-z202/2} 是 均值 为 零 , 方差 为 82 的 正 态 分 布 的 特征 函数 , 由 推论 
5.2.2 得 


OO 2 了 2 2 
去/ 中- 人 1- E59 人 其) viEeR. (5.5.3) 
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于 是 由 单调 收敛 定理 , 令 8 | 0, 得 

oo oo 2 22 

[ge 0 = hm {gle,0) exp 全 dz 


2 2 2 92 
-lm [-. f(t )op{ -te - erat 





B 一 0 27 2 2 
oo 友 0212 

= lim ——— t —— bdt 
| 2 2 } 


| 1 roo uw? 6202w2 
=- 加 记 帮 79op{- 邱 - 5 je 


ew /2du =1. 





-- 专 广 


这 说 明 对 每 个 固定 的 o > 0, 对 z 而 言 g(z,c) 是 一 个 概率 密度 函数 . 同 理由 式 
(5.5.3), 控制 收 全 定理 及 f 的 连续 性 , 可 证 


2 92 
5 » itzx ll: 59 : 之 OO 
| g(x,o)e dy 一 bm 人 g(x,0) exp {is pn } dz 


一 bm | (去 | exp {i — tx 一 世 } dc] 








. 1 oo 5202 (5 一 上 
-县 -5 户 roeo 人 -全 - 52 ja 
2v2 ,2 
- 凤 - 款 记 fet ub) er {- a 


= 0m {-), 


因此 对 每 个 c > 0, f(t)exp{ 一 o2t2/2} 是 一 个 特征 函数 . 由 特征 函数 的 连续 性 定理 ， 
当 go 一 0 时 , f(t)exp{ 一 o2&2/2} 的 极限 f(t) 也 是 一 个 特征 函数 . 和 


由 定理 5.5.2 看 到 , 非 负 定性 (5.5.1) 与 一 个 二 重 积 分 的 非 负 性 等 价 . 根据 这 一 
想法 , 我 们 有 如 下 的 准则 . 

定理 5.5.3 (Cramer 准则 ) 一 个 有 界 的 实 变 量 复 值 连续 函数 /是 特征 通 数 的 
充分 必要 条 件 是 : 
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(1) f(0)= 1; 
(2) 对 一 切 ze 了 及 a> 0， 


V(x, a) = [i f(t — wu) exp{iz(t — wu)} dtdu > 0. 


证 明 可 参见 Lukacs (1960). 

寺 述 结果 都 是 充分 必要 条 件 , 因此 从 理论 上 讲 是 非常 漂亮 和 深刻 的 , 但 缺点 是 
不 容易 验证 . 下 面 我 们 将 给 出 实 变量 上 的 实 值 函 数 是 特征 函数 的 充分 条 件 ， 

定理 5.5.4(P6lya 条 件 ) 设 f(t) 是 实 变量 上 的 连续 实 函 数 , 且 满 足下 列 条 件 : 

(1) f(0) = 1; 

(2) f(—t) = f (0); 

(3) 对 上 > 0, f(t) 为 凸 函数 ; 

(4) lim jb =0. 
则 f(#) 是 一 个 绝对 连续 分 布 函数 下 的 特征 函数 . 

证 由 于 当 上 >0 时 上/ 信 为 连续 凸 函 数 , 故 它 的 右 导 数 处 处 存在 , 记 为 上 (的 ， 
则 天 全 非 降 . 下 面 我 们 首先 证 明 积分 

三 e-itr f(t)dt 当 z 关 0 时 存在 . (5.5.4) 

由 条 件 (2) ~ (4) 知 f(t) 分 别 在 [0, co) 和 (一 o0,0] 中 单调 且 对 任意 的 te R, f(t)j >0 
(车 存在 to 使 f(to) = 0, 则 由 凸 性 知 当 | 村 综 lto| 时 f(t) = 0). 设 b5>a>0, 由 第 二 
中 值 定理 , 当 x 关 0 时 有 


gt) (Oa = fC0) 





oltadl 


< 二 /Fw 一 0 (a 一 十 oo)， 


|z| 
其 中 & € [a,b], g(4) = sinw 或 cosu, 故 积分 | eritz bd 当 z 关 0 时 存在 . 由 对 
称 性 得 积分 | e-™j(t)dt 当 z 关 0 时 存在 . 由 此 知 式 (5.5.4) 成 立 . 记 


ptz) = 二 [eat (5.5.5) 


由 于 f(t)sintz 关于 t 是 奇 函 数 , 在 [0,00) 和 (oo,0) 上 积分 分 别 存在 , 故 
D(Z) = = 六 f(t) costz dt. 
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因为 f(t) 在 [0, cc) 上 为 凸 函 数 , 由 凸 函 数 的 性 质 知 , 对 任意 t+>a 之 0 有 
f= f+ FW du. 


再 由 分 部 积分 得 
P(Z) = -元 三 sintzdf(t) = -二 网 用 (sintz dt. (5.5.6) 


下 面 我 们 证 明 对 所 有 的 z > 0, p(z) >0. 设 z>0, 则 


1 (k+l)n/z . 
p(z) = —— 3 J f4(t) sintz dt 
k=0 


oo 


1 __11k+1 T/z 了 kx : 
= 坪 2 1) 上 六 [t+ sin tz dt. (5.5.7) 


由 定理 条 件 (4) 知 , 丹 ( 引 < 0, lim 并 ( = 0, 因此 级 数 (5.5.7) 是 通 项 绝对 值 北 减 
趋 于 零 的 交错 级 数 ， 而 它 的 第 一 项 为 正 ， 故 p(x) > 0. 由 p(z) 为 偶 函 数 知 , 当 z 夫 0 
时 总 有 p(x) > 0. 由 式 (5.5.6), 对 t+>0 和 NN >0, 有 


N 1 re ,, N sinus costz 
上 p(z)costz dz = 一 元 人 六 (oOdu | 一 一 一 一 qz. 


0 了 
但 是 
] , | 0, Ogu<t 
Alfr™sinurcostz ， _ 
7(w) 全 = 一 dz 1/4, wu=t 
1/2, w>t, 


因此 由 控制 收敛 定理 (可 设 p(0) = 0， 这 不 六 辜 亲 是 的 讨论) 


1 1 
hy pr)eostrdr =— fh nda) = -3 f(t) = 510), 

即 

f(#) = 2 人 p(x) costr dx. (5.5.8) 
当 + 二 0 时 有 

三 P(Z)dz 一 2 三 p(x)dx = 1, 
即 p(z) 是 概率 密度 函数 . 由 于 式 (5.5.8) 对 上 = 0 成 立 以 及 p(x) > 0, 故 右边 积分 是 
绝对 收敛 的 . 再 注意 到 p(z) 为 偶 函 数 , 故 式 (5.5.8) 可 写 为 
ft) = | plz)etedr， 
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即 f(t) 是 概率 密度 为 p(x) 的 分 布 对 应 的 特征 函数 . 人 

我 们 把 满足 定理 5.5.4 的 函数 称 为 Polya 型 的 特征 函数 , 从 上 述 证 明 中 可 以 清 
楚 地 看 到 , 一 个 Polya 型 的 f(t) 对 应 的 概率 密度 函数 p(x) 总 可 以 由 Fourier 公式 
(5.5.5) 得 到 , 即使 道 转 公式 推论 5.2.2 中 f(t) 绝对 可 积 条 件 不 满足 时 也 成 立 . 

下 面 我 们 列 出 几 个 Polya 型 的 特征 函数 : 

(a) f(t) = (1+ | 7; 

(b) f(t) = ettl; 

. 1 

(c) /的 = 二 上 stay + a {> 2 

(d) f(t) = (1 — ht) Hue}: 

注意 , f(t) = (1 十 世 )-! 是 特征 函数 , 但 f(t) 不 是 Polya 型 的 , 它 对 应 的 密度 函 
数 为 

p(z) =e-l*l/2, x €R. 


由 逆转 公式 (5.5.5), (b) 中 f 是 Cauchy 分 布 的 特征 函数 , (d) 中 特征 函数 对 应 分 布 


的 密度 函数 为 ， 
0 -En 

且 (b) 和 (d) 中 的 两 个 特征 函数 是 绝对 可 积 的 , 但 (a) 和 (c) 不 是 绝对 可 积 的 , 其 
对 应 的 概率 密度 p(x) 不 能 由 式 (5.5.5) 直接 算出 显 式 表达 式 , 而 是 导出 了 高 阶 超 
越 函 数 . . 

P6lya 条 件 使 我 们 能 够 构造 一 些 例子 , 以 帮助 我 们 对 分 布 函数 和 特征 函数 之 间 
的 一 一 对 应 关系 有 更 深刻 的 认识 . 

例 5.5.2 如 图 5.1, 设 f(t) 是 任 一 P6lya 型 的 特征 函数 , 它 的 右 导 数 1 当 上 > 0 
时 严格 增 , 对 f(t) 右边 任意 小 的 一 段 驱 用 弦 来 代替 , 同时 对 称 地 改变 f(t) 左边 相 
应 部 位 , 由 此 得 到 一 个 新 的 函数 及 (t), 它 也 是 P6lya 型 的 特征 函数 , 除了 两 个 任意 
小 的 对 称 区 间 外 , 户 伯 = f(t). 由 特征 函数 和 分 布 函 数 之 间 一 一 对 应 知 方 和 了 是 
两 个 不 同 分 布 的 特征 函数 , 由 此 知 即使 两 个 特征 函数 在 有 限 区 间 上 相同 , 也 未 必 在 
到 上 人 恒 等 . 如 上 面 所 举 的 (c) 和 (d) 中 的 特征 函数 , 它们 在 区 间 [--1/2,1/23] 上 相同 ， 
但 却 对 应 于 两 个 不 同 分 布 . 4 


Polya 条 件 可 以 用 来 导出 另 一 个 充分 条 件 , 它 适用 于 一 些 周期 函数 . 
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图 5.1 Pa6lya 型 特征 函数 


定理 5.5.5 设 f(t) 为 满足 下 列 条 件 的 实 值 函 数 : 
( f(0) = 1; 
(2) f(t) = f (2); 
(3) f(t) 为 [0,7] 内 的 连续 是 函数; 
(4) f(t) 有 周期 2 r; 
(5) f(7) = 0. 
则 f(t) 是 格子 点 分 布 的 特征 函数 . 
证 定义 广 引 = 了 (Tgicry, 则 所 (t) 是 P6lya 型 特征 函数 , 设 其 对 应 概率 密 
度 函 数 为 p(z). 由 于 户 < Li(R), p(x) 是 有 1(t) 的 Fourier 反 变 换 , 故 : 


At)e at= [f(t) etdt > 0, 
于 是 f(t) 的 Fourier 变换 > cneimt 中 系数 c 为 


1 ” —intn/r 
二 之 一 . . 
Cn 元 | f(t)e dt 之 0， n= 0,+tl, 


因为 f(t) 是 [0,7] 上 的 连续 四 函数 ,所 以 是 有 界 变 差 函 数 ， 从 而 f(t) 的 Fourier 
变换 立 cueint 收敛 于 jb， 即 f(t) 是 一 个 格子 点 分 布 的 特征 函数 , 跳跃 点 包含 在 
{nz/r,n = 0, 士 1 ……} 中 . E 

注 上 述 的 及 和 在 区 间 [_r,r] 中 相同 , 但 对 应 于 不 同 的 分 布 函数 、 

下 面 给 出 级 数 形式 特征 函数 的 判别 法 . 

定理 5.5.6 设 {fan,m > 1} 为 一 列 实 数 , 则 对 每 个 特征 函数 序列 {@(t),n > 1}， 
f(t) = 中 onpn(D) 仍 为 特征 函数 的 充分 必要 条 件 是 


》 om 一 1，dn>0 n=1,2,... (5.5.9) 
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证 充分 性 设 {bn,n > 1} 是 特征 函数 序列 , 由 式 (5.5.9) 知 六 ojbn(t) 一 至 
n=1 
收敛 . 不 失 一 般 性 , 设 a1 > 0 (否则 取 第 一 个 不 为 0 的 am), 令 


一 | 
gr 的 一 一 到 一 一 


> a 
j=1 
由 性 质 5.3.1 知 gn(t) 仍 是 特征 函数 , 因此 , 车 以 己 表示 9; 对 应 的 分 布 函数 , 则 有 


g(t) = 站 ed 昌 sn 
j=1 


其 中 8; = 0 Dar j= ` ,mn， 由 于 于 25 是 分 布 函数 的 凸 组 合 , 故 仍 为 分 


布 函数 . 另 一 方面 名 人 一 致 收敛 于 f()， 而 galt ) 连续 , 因此 了 在 上 = 0 点 连续 , 由 
完全 收敛 性 准则 (定理 5.2.3) 知 f(t) 仍 是 特征 函数 . 


必要 性 取 Bj(t) = et, 1 < 7 了 <n; prlt) =1,k>n+1, 则 


5 wu 的 


f(t) = Saje 十 > aj. (5.5.10) 
7=1 IJ 二 nn 十 1 
由 1=f(0)= Ya 数 a ,收敛 . 记忆 为 7 对 应 的 分 布 函 数 ， 由 推论 5.2.3， 
j=0 j=1 
feat = FO) - PU- 
Jim 元 j—). (5.5.11) 


另 一 方面 , 由 式 (5.5.10), 对 1&<j&n, 


lim 二 三 flt)e dt = ay. 


< 一 oo 2c 
结合 式 (5.5.11) 得 oj = 下 ( 力 一 FFO-)> 关 0 了 = 1,…,n. 由 于 是 任意 的 , 所 以 对 
一 切 7， CI 0. [| 
由 本 命题 可 以 推出 如 下 的 结论 : 


推论 5.5.2 设 an 之 0,n=0,1,…,z 为 复数 , $(t) 为 特征 函数 , 若 帮 级 数 
g{z) = 2 


在 z=1 点 收敛 , 则 f() = g($())/g(1) 是 特征 函数 . 
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证 这 可 以 由 定理 5.5.6 直接 推出 , 因为 p(t) 是 特征 函数 可 推 知 当 n> 0 时 


9"(t) 仍 是 特征 函数 . I 
例 5.5.3 设 
g(z) 一 ez = 》, 2, 入 >0, 
n= 二 0 


则 g(1) = es.， 因此 车 8(#) 为 特征 函数 , 则 f(t) = exp{ 和 (8(t) - 1)} 为 特征 函数 . 

特别 地 , 取 $(t) = 后 则 f(t) = exp{ 和 (er 一 1)} 为 特征 函数 (实际 上 f(t) 是 参 

数 为 入 的 Poisson 分 布 的 特征 函数 ); 取 g(t) = er 所 ,入 = 1 其 中 a > 0, 则 

f(t) = exp{e-** 一 1} 为 特征 函数 . 4 
例 5.5.4 设 p> 1 为 实数 , $(t) 为 特征 函数 , 令 


D-1 p-le 1 ， 
g(2) = = > : 


一 页 之 
2 一 2 p 





了 一 0 


由 推论 5.5.2 得 





~ 2-1 
1 = 5 0 
为 特征 函数 . 4 
在 本 节 最 后 , 我 们 列 出 几 个 大 家 熟知 的 概率 分 布 及 其 对 应 的 特征 函数 
(1) 二 项 分 布 : 
m= (PD) = bet GD" 


(2) Poisson 分 布 : 





pk = No, k=0,1,...; f(t) = exp {Me — 1)}. 
(3) 均匀 分 布 : 
Pa- 下 reoG 7 人 = 和 
(4) Cauchy 分 布 : 
P(r) = a 可 -oa >0 f= ealtltibe. 
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(5) 三 角 分 布 : 


Flz) = ys) f= 


2(1 — cosat) 
Q2 


a2t2 


(6) Laplace 分 布 : 
1p) = exp -9 . _ 
PF (2)= Pp ) a>0; f(t) = Toa 


(7) 指数 分 布 : 








一 an2 272 
Pa= {Ee } o>0; 1 =ep {iat- 9 下 


5.6 多维 特征 函数 


设 天 = (Xi1,:… ,Xk) 为 大 维 随机 向 量 , 用 以 描述 和 概率 特性 的 常用 方法 是 
XXX 的 联合 分 布 函数 下 (zi … ,zk). 与 一 维 分 布 函数 相仿 , 我 们 也 可 以 用 
维 分 布 下 的 Fourier 变换 来 研究 X 的 概率 特性 . 


定义 5.6.1 设 F(z) = 下 (z1,… ,zx) 是 随机 向 量 和 关 = (Xi,… ,Xk) 的 联合 分 
布 消 数 , 称 


k 
f(D = f(t ,tr)=E b>23) 


j=1 
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k 
二 三 . | exp ba | dF(zl， 。 , Tk) 
j=1 


为 的 特征 函数 . 


设 X; 的 分 布 函数 为 万 (zj 容易 验证 , 如 果 边 缘分 布 万 (zj) 在 zj = zjo 处 连 
续 , 7 二 1,… ,k, 则 三 在 zo = (z10,… ,Zzxo) 处 连续 .但 反 过 来 不 必 成 立 ,因为 下 的 
支撑 可 以 集中 在 一 个 超 平面 或 超 曲 面 上 , 进而 还 可 要 求 下 在 每 个 点 上 没有 正 测度 . 
为 了 定义 R* 中 分 布 函数 序列 的 弱 收 敛 , 我 们 需要 定义 如 下 的 集合 : 


C(F)= {2 = (21,.. ,2k): F(x;—) = y(7;), 1 & 7 & k}. 


由 上 面 的 说 明知 道 集合 C(E) 包含 在 的 连续 点 所 构成 的 集合 内 . 


定义 5.6.2 R* 上 的 一 列 分 布 函数 {五 ,,n > 1} 称 为 弱 收 仑 于 R* 上 的 广义 分 
布 函数 F, 若 对 每 个 z < C(P)， 


lim F(x) = F(z), 


记 为 轧 , 一 > F; 如 果 下 是 一 个 随机 向 量 的 分 布 函 数 , 则 称 玉 , 完全 收敛 于 F, 记 为 
Fo or. 

定理 5.6.1( 逆 转 公 式 ) 如 果 随 机 向 量 关 = (Xi1,… ,Xk) 的 分 布 函数 为 下 ,对 
应 的 特征 函数 为 f, 则 对 任意 a,be C(F),a <b, 有 


itjay — eit;b 


Fla,b] = lim Br: [ft yl 


定理 的 证 明 除了 稍稍 繁琐 一 点 外 , 完全 类 似 于 一 维 情况 下 的 定理 5.2.1, 因此 把 
证 明 贸 给 读者 ， 由 定理 可 知 多 维 分 布 函 数 和 对 应 的 特征 函数 是 一 一 对 应 的 .特别 
地 , 设 叉 和 YY 为 k 维 实 随机 向 量 , 则 入 YY 当 且 仅 当 对 任意 a € R*,a'X a'Y. 

关于 多 维 分 布 函 数 和 对 应 特征 函数 的 关系 , 有 许多 是 一 维 分 布 函数 和 对 应 特 
征 函数 关系 的 平行 推广 , 例如 一 维 情形 下 的 完全 收敛 性 准则 (定理 5.2.3) 可 以 平行 
推广 到 多 维 . 把 x 和 理解 为 R* 中 的 点 后 , 多 维 情形 下 的 完全 收敛 性 准则 的 形式 
和 一 维 是 一 样 的 . 另外 , 值得 一 提 的 是 随机 变量 Xi,… ,Xu 的 独立 性 可 以 用 特征 
函数 来 刻画 . 
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定理 5.6.2 定义 在 (2, or,P) 上 的 大 个 随机 变量 Xi,… ,X4 相互 独立 的 充分 
必要 条 件 是 它们 的 联合 特征 函数 等 于 各 个 边缘 特征 函数 的 乘积 , 即 


k 
fx x (tt, ti) = 1 fx 83). (5.6.1) 
一 二 


证 必要 性 由 Xi ,Xx 的 独立 性 知 {exp{ityXX;},j 二 1,… ,8} 之 间 相 互 独 
立 , 因此 


k k 
fx Xk (ti, 0 , tx) =E oa 一 ll! [e's* 了 ] = 本 xi (ty 
j=1 ji 


充分 性 设 式 (5.6.1) 成 立 , 且 记 X 的 分 布 函 数 为 态 , j= 二.… ,hb 则 站 三 
j=1 
为 维 分 布 函 数 , 其 特征 函数 为 


大 k 
| em {se 
j=1 一 
k k 
一 IJ eidP (rj) = I #x; 0;). 


由 式 (5.6.1) 得 , (Xi,.… ,Xi) 的 联合 分 布 函数 Fx, x, 和 入 斑 对 应 的 特征 函数 
j=1 
是 相同 的 , 由 唯一 性 定理 (定理 5.6.1) 即 知 


k 
Fx ,Xi (Tl , Tk) 一 [I 天)， V(z1 , Tk) € R*, 
j=1 


即 Xi1,… , Xx 相互 独立 . I 
当然 , 多 维特 征 函数 的 许多 性 质 是 一 维特 征 函数 的 平行 推广 , 但 由 于 维 数 的 增 


加 , 必然 会 增加 多 维特 征 函 数 本 身 特 有 的 性 质 , 出 现 一 些 与 一 维特 征 函数 不 同 的 性 
质 , 但 这 已 超出 了 本 书 范围 . 有 兴趣 的 读者 可 以 参阅 有 关 特 征 函 数 的 文献 . 


在 本 节 最 后 , 我 们 给 出 多 维 正 态 分 布 特征 函数 的 一 条 性 质 , 以 及 判别 随机 向 量 
依 分 布 收敛 于 多 维 正 态 分 布 的 等 价 条 件 . 
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定义 5.6.3 称 随机 向 量 入 = (Xi,… ,Xk) 服从 均值 向 量 为 a € R*, 协 方差 矩 
阵 为 马 的 天 维 正 态 分 布 , 记 为 不 ~ Nj(a, 允 ), 如 果 天 的 特征 函数 为 


fx(t) = exp fiat 一 3 t) ， VteR’. (5.6.2) 
当 允 为 正定 矩阵 时 , Nj(a, 允 ) 是 绝对 连续 型 的 , 其 概率 密度 函数 为 
p(x) = (27) "2|5| 1/? exp 人 -各 一 a) 马 -L(z 一 o} ， VwER*. 
当 马 是 退化 时 , Ni(a, 允 ) 是 奇异 连续 分 布 . 
多 维 正 态 分 布 有 许多 优良 的 性 质 , 其 中 之 一 是 多 维 正 态 随机 向 量 的 任意 线性 


变换 依然 服从 (多 维 ) 正 态 分 布 . 下 面 的 定理 提供 了 判断 一 个 大 维 随机 向 量 是 否 服 
从 维 正 态 分 布 的 的 有 力 工 具 . 


定理 5.6.3 设 关 为 k 维 随机 向 量 , 则 瑟 ~ Nuf(a, 马 ) 当 且 仅 当 对 任意 s E R*， 
s' 义 服从 一 维 正 态 分 布 NW(s'a,s' 马 s). 
证 必要 性 设 着 ~~ Ni(a, 允 ) 以 及 任意 se R*, 则 Y== s 于 的 特征 函数 为 
fr(t) = Elexp{it (s’ X)}] = Elexp{i(st) XH 


= exp {ila's)t 一 >(s'5 oe ， teR, (5.6.3) 

即 Y ~ N(s'a,s' 互 s). 

充分 性 设 对 任意 se R*, 有 s' 久 ~ N(s'a,s' 允 s), 则 s' 久 的 特征 函数 为 式 
(5.6.3). 特别 地 , 取 t= 1, 得 

Elexp{is’ X} = exp {files 一 ss} . 

由 定义 5.6.3 知 , 和 ~ Ni(a, 允 ). 有 

在 数理 统计 中 经 常 需 要 考察 随机 向 量 依 分 布 收敛 于 多 维 正 态 分 布 的 问题 . 利 
用 定理 5.6.3 和 多 维特 征 函数 的 完全 收敛 性 准则 , 我 们 可 以 证 明 如 下 的 结论 . 

定理 5.6.4 设 {X,nm > 1} 为 到 维 随机 向 量 序列 . 如果 对 任意 满足 ss = 1 
的 向 量 s e R*, 有 

s'X") ,NN(0,1), 

则 入 泛 ; Nj (0, 了). 

利用 该 定理 , 多 维 场合 下 的 中 心 极限 定理 就 可 以 化 为 一 维 场合 下 的 中 心 极限 
定理 , 因而 处 理 起 来 很 方便 . 


235 


概率 论 教程 OQOOOOOOOOOO000000000000000000GG. 


5.7 习题 


1. 设 已 是 尺 上 的 分 布 函数 ,5 为 下 的 支撑 集 . 


(1) 证 明 严 的 每 个 跳跃 点 属于 S 且 支 撑 8 的 每 个 孤立 点 是 的 跳跃 点 ; 
(2) 证 明 8 是 闭 集 , 着 FF 连续 , 则 5 是 完全 集 ; 
(3) 给 出 一 个 离散 分 布 的 例子 , 使 它 的 支撑 是 直线 了. 


2. 设 G 是 及 上 的 分 布 函数 , 令 F(x,y) = min{zx,G(y)}. 


(1) 证 明 FF 是 RR* 上 的 分 布 函数 ; 


(2) 证 明 五 的 支撑 在 曲线 C = {(z,G(z)) : ze 了)} 中 ,而 和 2(C) =0, 其 中 入 为 到 ? 
上 的 Lebesgue 测度 . 


注 : R* 上 的 分 布 函数 已 的 支撑 点 zw 定义 为 : 对 Ye> 0, AF(e -em+el >0. 
3. 举例 说 明 XX, 但 Xs。 六. 
4 设 {Xn > 1} 为 随机 变量 序列 


(1) 当 n 为 奇数 时 , X = 1/n; 当 m 为 偶数 时 ，Xw = 0, 证 明 X,, -= 0; 
(2) 设 X 的 分 布 函数 序列 如 点 点 收敛 于 随机 变量 X 的 分 布 函数 已 , 证 明 


so 中 ntz) — F(z)| =— 0, 
即 收敛 是 一 致 的 . 
由 (1) 和 (2) 知 , 车 及 -五 ， 则 sup|Fn(z) — F(z))| 不 一 定 趋 于 零 . 
5. 令 多 = {五 :下 为 随机 变量 的 分 布 函数 }, 对 已 术 e 多 , 记 
dF FF)=inf{fh:F(r— h-hh F(zr) < Fr+h)+h, vr eR}. 


(1) 作 图 并 给 出 d( 下) 的 一 个 几何 解释 . 
[提示 : 考虑 FF 与 PF" 的 图 像 在 斜率 为 -1 的 直线 上 所 截取 的 所 有 线段 之 长 .] 
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(2) 证 明 如 此 定义 的 函数 d 构成 一 个 距离 , 并 且 (多 , d) 是 一 个 完备 的 度量 空间 , 称 之 
为 Lévy 空间 . 


(3) 以 下 三 个 命题 等 价 : 
FF ad(F,,F)—0; | gdF, 一 厂 gdF 
其 中 9 可 为 RR 上 的 任 一 有 界 连续 函数 . 
6. (1) 证 明 FF 与 (--h,h) 上 的 均匀 分 布 的 卷 积 FF, 及 其 特征 函数 fi 由 下 式 给 出 : 


sin 2 


Bo) = Feay, hl) = Df). 
(2) 由 上 式 证 明 


1 z+2h 1 I 
项 上 F(y)dy 一 pa _ WAY 


2 (2) evr/hp (¥) du, 
并 由 此 导出 连续 性 定理 . 
7. 设 分 布 函数 下 的 天 阶 矩 ms 存在 有 限 , 证 明 对 应 的 特征 函数 / 有 


log f(t) = 》， 对 人 (it)* + o(t*) 
k=1 


诸 ax 称 为 半 不 变量 , 形式 上 有 


把 前 四 个 半 不 变量 用 矩 表达 出 来 . 反之 , 导出 用 半 不 变量 表达 和 矩 的 公式 , 并 证 明 
laxl & kp, 
其 中 jx 为 瓦 的 天 阶 绝对 矩 . 
8. 设 f 为 随机 变量 的 特征 函数 , 车 Re f 在 上 = 0 处 可 导 , 证 明 : 


四 /多 = 1 un 


= o(1) 十 i zdF(z), 0<h—0. 
(2) F 存在 有 限 的 充 要 条 件 是 
m = lim 全 zdF(z) 


存在 有 限 , 此 时 有 (0) = im. 将 此 结果 推广 到 任意 奇数 阶 导 数 . 至 于 偶数 阶 导 
数 , 你 有 什么 结论 ? 
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9. 设 f 为 特征 函数 , G 为 分 布 函数 且 G(0) = 0, 证 明 下 列 函 数 均 为 特征 函数 : 
了 f (ut)du, 让 flut)e “du, 人 e ldqG(w), 
Sac), 六 flut)dG (uy. 
10. 设 f(u,t) 是 R? 上 的 一 个 函数 ， 满足 对 每 个 Us Fu) 是 特征 函数 且 对 每 个 t, f(.,t) 是 
连续 函数 , 则 
| Au pbac(w 
是 特征 函数 , 其 中 G 为 任意 一 个 分 布 函数 . 
11. 设 分 布 函数 玉 的 特征 函数 为 f(t), 证 明 


Jim 记 f(at = Dr) Pleo 


12. 设 只 是 纯 离 散 分 布 , i(z) = 洒 pj6(z 一 27), 其 中 6(z) = Jlo,oo)(z), pj 学 0, 半 p; =1， 
了 了 
F2 有 密度 p(x), 求 Fi* FF 的 密度 函数 . 


13. 设 {X;,7 之 1} 为 一 列 iid 随机 变量 序列 , 共同 的 分 布 是 参数 为 的 指数 分 布 . 对 给 定 
的 x >0, 定义 
v= sup{n: Sn & x,n > 0}, 


其 中 So = 0, Sn = Xi 十 … 十 Xn, 证 明 随 机 变量 > 服从 参数 为 和 的 Poisson 分 布 . 


14. 举例 说 明 两 个 随机 变量 X 和 YY 不 独立 , 有 相同 的 分 布 F, 而 它们 的 和 六 十 Y 的 分 布 
答 为 FP* 开 . 


提示 : 取 X =Y, 用 特征 函数 来 说 明 . 
15. 设 XX 二, 大 YY, 多 与 Y 独立 , 且 对 每 个 ,XX 与 YY 独立 , 则 


Xn 十 YY 


16.， (1) 根据 特征 函数 证 明 著 名 的 三 角 恒 等 式 





(2) 把 上 式 改 写 为 
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17. 


18. 


19. 


20. 


21. 


22. 
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证 明 右 边 的 两 个 因子 都 是 奇异 连续 分 布 的 特征 函数 , 这 说 明了 两 个 奇异 连续 分 布 
的 卷 积 可 以 是 绝对 连续 的 . 


提示 : 考虑 Cantor 集 
C 一 zf 二 Qn 一 0,2，. 
全 3” 3» 


设 铸 和 YY 为 iid 的 随机 变量 , 均值 为 0, 方差 为 1. 如 果 关 十 YY 和 XX 一 Y 相互 独立 ， 
证 明 X 和 YY 的 公共 分 布 为 标准 正 态 分 布 . 
设 f 为 分 布 函数 FF 的 特征 函数 , 且 当 + 一 0 时 ， 

f(t)=1+0o(ltl), 0<ag?, 


证 明 : 当 c 一 +oo 时 , 有 





fs Fr) = ole ®). 


设 X 和 YY 为 iid 随机 变量 , 均值 为 0 及 方差 为 1. 车 (XX 十 了)/V2 的 分 布 与 X 的 分 
布 天 相同 , 证 明 玉 = ,其 中 5 为 标准 正 态 分 布 . 


设 b,, > 0, 了 为 特征 函数 ., 若 |f(bat)| 处 处 收敛 于 一 个 不 恒 为 1 的 特征 函数 , 证 明 5b 
收敛 于 一 个 严格 正 的 有 限 数 . 
提示 : 证 明 不 可 能 有 如 的 子 序列 使 其 收敛 于 0 或 +co, 或 有 两 个 子 序列 收敛 于 不 同 
的 极限 . 
设 Xi,.… ,Xn iid ~ 已 ,下 为 非 退 化 的 整数 格子 点 分 布 , 步 长 为 1, 证 明 存在 常数 C, 使 
对 每 个 7 有 

P(Sn =j) & Cn 172， 
其 中 Sn = Xi 十 -… 十 六，. 
提示 : 利用 性 质 5.3.5. 


设 已 和 G 为 两 个 分 布 函数 若 对 任意 自然 数 w 有 |” z"dF = [ ”x"dG, 能 否 推 
出 f=G? 


提示 : 考虑 密度 函数 
falz) = 去 exp {-z (1 一 Qsin £1/)10,00) (7), ca € (0,1), 
由 分 部 积分 证 明 


x* exp {-z sinz!/sdz =0, VkeNuU {0}. (Feller, 1971, p.227) 
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23. (1) 两 个 特征 函数 即使 在 一 区 间 上 相等 也 未 必 在 及 上 恒 等 . 

(2) 存在 特征 函数 及 和 户 , 使 请 = 户 户 . 此 式 说 明 同 一 分 布 律 的 卷 积 可 以 等 于 该 分 
布 律 与 另 一 个 不 同 分 布 律 的 卷 积 . 

24. 证 明 当 a s (0,2] 时 , fo(t) = exp{ 一 |t|*} 为 特征 函数 . 
提示 : 对 0 < wa 乏 1 用 Polya 定理 ; 对 1<a<<2, 可 参见 (Chung, 1974, p.183 或 中 译 
本 , 定理 6.5.4). 

25. 证 明 : 车 及 和 为 特征 函数 , 则 集合 4= 华 : 及 ( 引 = 所 (t)} 是 包含 0 及 关于 0 对 称 
的 一 个 闭 集 . 


26. (1) 设 9 为 无 理 数 , {a} 表示 a 的 小 数 部 分 . 考虑 序列 {{nbj,m e N}, 定义 概率 测度 
Pn 为 
Pn(A)==-#{k: fkgj € Al < kgn), 
其 中 # 已 表示 集合 B 中 元 素 个 数 , 证 明 Pa 弱 收 敛 于 (0,1) 上 的 Lebesgue 测度 . 
提示 : 先 考虑 0 为 有 理 数 , 然后 用 有 理 数 逼近 无 理 数 . 
(2) 设 随机 变量 X 以 概率 1 取 值 为 无 理 数 , , 表示 nX 的 小 数 部 分 {nXX} 的 分 布 函 
数 , 用 (1) 中 的 结论 及 完全 收敛 性 准则 证 明 : n-! 3 及 弱 收 敛 于 [0,1 上 的 均匀 
R=1 
分 布 . 
27. 用 连续 性 定理 ( 即 完全 收敛 准则 ) 证 明 : 二 项 分 布 可 用 Poisson 分 布 逼 近 ( 即 Poisson 
有 逼近 定理 )， 
28. 以 o2(€) 和 c2(7) 分 别 记 随 机 变量 上 和 7 的 方差 . 


(1) 车 (6) < 00,03(m) <o0, 则 |o(8) 一 olW| < ol 一. 
(2) 设 {V%} 和 {Wn} 为 两 个 随机 变量 序列 , 0 < o?(Va) < co, G 为 分 布 函数 , 且 设 当 


nn 一 oo 时 ， 





Wh ar E(W, 一 Vn)? 
a(Vn) : o2(Vn) 
证 明 Wn/o(Wh) 二 G Wn/o(Vn) > G. 


提示 : 先 证 明 W/o(Va) - G, 这 由 


— 0, 


Wn Vn Wn — Vn 


oa) ot) aol) 
得 到 , 然后 用 (1) 中 的 结果 . 
29. 设 X 和 了 分别 有 分 布 函数 玉 和 G. 证 明 : 
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(1) 车 五 和 G 没有 公共 跳 点 , 则 E[F(Y)] 二 EIG(X)] = 1 
(2) 若 斑 连 续 , 则 E[F(X)] = 1/2. 
(3) 即使 和 G 有 公共 跳 , 若 尺 与 了 相互 独立 , 则 


E[IF(Y) + EIG(X)] =1+P(X =Y). 
(4) 即使 有 跳 , 我 们 也 有 


E[F(X)] = 3 十 ;DPX = 7). 


30. 设 随 机 变量 X 的 特征 函数 为 f, 且 E|XI” < oo,0<r<2, 证 明 


EIXI = + nT (™” 1—Ref() gr 


2 ~. 一 oo 上 "+1 
31. 设 和 和 了 为 独立 同 分 布 的 随机 变量 . 若 EIX|" < oo,0<r<2, 则 
EIX+Y| > EX—YI|. 
车 EIXI" < oo,1g&r 志 2, 则 


EIX+Y| > EIX|. ( 安 鸿 志 , 2006) 


32. 设 {Xn,n > 1} 为 独立 同 分 布 的 随机 变量 序列 , 满足 E[X1] = 0, E[X?2] = o? < eco, 则 


一 2 
X = V2 


1 
i ———E 
no VA 
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第 6 章 极限 定理 


在 第 2 章 , 我 们 讨论 过 一 般 随 机 变量 的 各 种 收敛 性 问题 . 本 章 将 重点 讨论 一 类 
极 有 实际 意义 的 随机 变量 序列 部 分 和 序列 的 极限 问题 . 以 下 总 记 {Xn,n 之 1} 
是 概率 空间 (0, .of,P) 上 的 独立 随机 变量 序列 ， 





S» = YX, n= 
k=1 


概率 论 中 主要 研究 部 分 和 序列 {5%,n > 1} 的 如 下 几 个 收敛 性 问题 : 

(1) 弱 大 数 定律 一 研究 5,/B。 - 4A, 一 > 0 的 充分 必要 条 件 , 这 里 以 及 后 面 
的 4。 和 B,, 为 两 串 常数 序列 , 满足 Bn > 0 且 Bn fT 十 00; 

(2) 强大 数 定律 一 一 研究 Su/ B, - 4 一 > 0, a.s. 的 充分 必要 条 件 ; 

(3) 重 对 数 律 一 一 研究 何 时 有 lim sup Syn/Bn = 1, a.s.; 

(4) 中 心 极限 定理 一 研究 8,/B 一 4 之; N(0,1) 的 充分 必要 条 件 . 

当 {X%,n 之 1} (以 下 简 记 为 {Xn}) 为 独立 随机 变量 序列 时 ， 上 述 问 题 己 有 十 
分 完美 的 结论 . 近年 来 关于 极限 定理 的 工作 主要 有 两 大 类 . 一 类 是 去 掉 独 立 性 条 
件 , 在 各 种 相依 性 条 件 下 研究 上 述 有 关 随 机 变量 序列 收敛 的 极限 问题 , 如 关于 在 各 
种 混合 条 件 下 极限 理论 的 研究 ; 关于 蒜 ( 半 款 ) 序列 极限 理论 的 研究 ; 关于 各 种 统 
计量 极限 理论 的 研究 等 等 . 另 一 类 是 把 对 随机 变量 序列 极限 理论 的 研究 发 展 到 各 
种 随机 过 程 在 各 种 空间 中 极限 定理 的 研究 , 而 把 所 研究 的 随机 变量 序列 嵌入 到 某 
个 随机 过 程 中 去 , 如 在 Banach 空间 中 随机 元 的 极限 等 等 . 但 是 在 独立 条 件 下 随机 
变量 序列 的 极限 定理 是 最 基本 的 , 也 是 最 有 启发 性 的 . 许多 其 他 场合 下 极限 定理 的 
结果 都 会 比照 独立 场合 下 的 结论 和 条 件 . 因此 我 们 的 目的 是 通过 对 本 章 的 学 习 使 
大 家 对 独立 情形 下 的 极限 定理 有 个 初步 了 解 , 为 今后 极限 理论 的 学 习 打 下 一 个 基 
础 . 想 进一步 了 解 这 方面 内 容 的 读者 可 以 参阅 有 关 极 限 理论 的 书 . 
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6.1 预备 知识 


为 研究 有 关 的 极限 定理 , 我 们 引入 一 些 必要 的 概念 和 不 等 式 . 
对 任 一 随机 变量 X, 记 
X° = XIIxIce), (6.1.1) 
称 X° 为 X 的 截 尾 随机 变量 . 由 于 Xe 以 c 为 界 , 因此 它 的 各 阶 和 矩 存在 . 
随机 变量 X 称 为 是 对 称 的 , 若 对 任意 x € 民 , 有 
P(X < -zx)=P(X>7). 
若 X' 与 X 独立 同 分 布 , 则 Xs 二 XX 一 X' 是 对 称 随机 变量 , 称 之 为 X 的 对 称 
化 . 显然 , 若 Var(X) = c2 < co, 则 Var(Xs) = 202. 
随机 变量 X 的 g 分 位 点 wg 定义 为 满足 如 下 不 等 式 的 任 一 实数 : 
P(X <m)2>g, P(X>wm)>1-g, Ogqgl1. (6.1.2) 
特别 地 , 当 g = 1/2 时 , wo,s 称 为 的 中 位 数 , 本 章 中 简写 为 名 . 
由 定义 可 知 中 位 数 (g 分 位 点 ) 必 存 在 , 但 不 唯一 . 可 以 证 明 , 若 名 不 唯一 , 则 


外 必 落 在 某 个 团 区 间 中 . 如 果 随 机 变量 X 为 对 称 的 , 则 0 是 它 的 一 个 中 位 数 . 关 
于 中 位 数 , 我 们 有 如 下 结果 . 


引 理 6.1.1 若 也 XI < co, 则 对 任意 BE 了 到, 有 
EIX—-w|<EX-A. 


车 Var(X) = o? < co, 则 
lw -EX|<o. 


证 记 随 机 变量 X 的 分 布 函 数 为 PF. 当 有 > 到 时， 





EIX -Bl -EX-wm=| ,Iz 6lr()— [lz ~ wldr() 


= (8— mF) — FO + J sl8+m 20)dF() 
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一 = -一 2 FrF d 和 
习 一 B 十 局 (z)dz 


由 中 位 数 定义 , 2F(w) > 1, 从 而 2 J, 4 了 5)dz > 8 一口 , 代入 上 式 即 得 
ElX—-6—EX-wl>0. 


当 8 < 到 时 , 进行 类 似 讨论 可 得 到 相同 结论 , 因此 第 一 个 结论 成 立 . 
当 Var(X) < co 时 , 由 已 证 的 第 一 个 结论 和 Schwartz 不 等 式 


IEX—-w<EX-w<EX-EX|<I[EX—- EX)?=0, 
立 得 第 二 个 结论 . 
引 理 6.1.2( 弱 对 称 化 不 等 式 ) 对 任意 es > 0 和 实数 a， 
3 P(X -om > ec) < P(X > 6)， 


1 
3P(X— ml > < P(X >9<2P (IX—aq > 3). 


证 设 X* 一 XX 一 XX', 其 中 X 与 为 独立 同 分 布 随机 变量 , w 为 (也 是 


X') 的 中 位 数 ， 


P(X*>€e)=P((X—-w)—(X-wm)>e) 
>P(X-wmw>e, Xmwm<0) 
=P(X—-mwmw>e):P(X’-w<0) 


1 
>5P(X-wm>e), 


即 得 式 (6.1.3). 


在 式 (6.1.3) 中 , 把 XX 换 成 -XX 可 得 到 一 个 不 等 式 , 并 将 该 不 等 式 与 式 (6.1.3) 


相 加 即 得 式 (6.1.4) 的 左边 不 等 式 . 而 式 (6.1.4) 的 右边 不 等 式 成 立 是 由 于 
PUX|>e=PI(X-a)-(X’ -0o)|>od 
<P (|X-al > 5) +P (IX’—al > 5) 


=2P (|X -al>3). 
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定义 6.1.1 称 随机 变量 序列 {Xn。} 和 { 到 } 是 尾 列 等 价 的 , 若 
P(X # Yio0.)=0. (6.1.5) 
称 序列 {Xa} 和 {Y%} 是 收敛 等 价 的 , 若 它们 的 收敛 点 集 只 相差 一 个 零 测 集 


由 定义 知 , 若 {Xs} 和 {Yn} 尾 列 等 价 , 则 对 每 个 we 2 Xn(w) 和 六,(w) 至 多 
在 有 限 项 上 不 同 (当然 这 个 有 限 项 的 项 数 依赖 于 ww). 


引 理 6.1.3( 等 价 性 引 理 ) 设 随机 变量 序列 {Xn} 和 {7} 满足 


VP, #¥) < oo 


n=1 
则 下 列 叙述 成 立 : 
(1) {Xn} 和 {Y,} 是 尾 列 等 价 的 ; 
(2) {Xn} 和 {YY} 是 收敛 等 价 的 ，; 
(3) 车 bo0, 则 {bz1 小 Xi} 和 {bz1 六 丈 } 是 收 分 等 价 , 且 在 公共 收 敏 点 
上 , 它们 的 极限 相同 和 
证 (1) 由 Borel-Cantelli 引 理 可 得 , 而 (2) 和 (3) 的 成 立 是 显然 的 . I 


6.2” 弱 大 数 定律 


定义 6.2.1 设 {X。} 为 一 随机 变量 序列 , 如 果 存 在 常数 序列 {4*} 和 正常 数 序 
列 {Ba}), 其 中 B,, 一 co, 使 得 
Sn P 
万 。 An, 一 0， 
则 称 {Xn} 服从 弱 大 数 定 律 (简称 大 数 定律 ). 
我 们 这 里 主要 讨论 独立 随机 变量 序列 以 及 B,, = n 这 种 形式 . 由 定义 知 {Xn} 
是 否 服从 大 数 定 律 与 Su/m 的 分 布 有 关 . 车 记 Xx 的 特征 函数 为 六 伯 , 则 5%/n 的 


特征 函数 为 
gn(t) = lI fr (2) ， 
k=1 
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由 分 布 函数 和 特征 函数 的 一 一 对 应 可 知 , 我 们 只 要 研究 是 否 有 gn(t) 一 1 (完全 收 
化 性 准则 ). 由 第 5 章 , 我 们 可 以 得 到 如 下 结果 . 
定理 6.2.1 设 {X%} 为 独立 的 随机 变量 序列 ， 则 Sn/m 了 ,0 的 充分 必要 条 
件 是 : 
(1) D>_ P(XHk| > ?3) 一 0; 
k=1 


nn 


ve r (XpTIxslsn}) — 0; 
k=1 


1 nn 
(3) = > E [XxHixeisn}] 一 0 
k=1 
证 令 Yk 二 XkTfxil<np R= 1 ,Nn 


充分 性 由 Chebyshev 不 等 式 、 独 立 性 及 条 件 (2), 对 任意 < > 0, 我 们 有 


1 nn 
° (3 > | > < Za 》 Var(Yns) 一 一 0， 
k=1l 




















因而 有 n 
= 》 (Zn — ElYng]) 一 0. 
k=1 
由 条 件 (3) 
1 P 
- DY ,0. (6.2.1) 
由 条 件 (1)， 
Sn 1 lv 
<P (Uw > 9) 
k=1 
< P(Xk| > 由 — 0, 
k=1 
即 


246 


i 人 OOOOOOOOOOOOOOOOOOOOOOO 第 6 章 极限 定理 


再 由 式 (6.2.1) 得 Sn,/n 一 0. 

必要 性 设 Sn/n 一 ,0, 以 mx 表示 随机 变量 Xk 的 中 位 数 , fi 表示 Xi 的 特征 
函数 , gn(t) 为 Sam 的 特征 函数 , 则 由 完全 收敛 性 准则 知 gn(t) = 下 fr(t/n) 一 1. 
设 c> 1, 由 定理 5.2.4 知 在 每 个 有 限 区 间 [~-c,c] 上 gr 人 一 致 收敛 因此 当 n 充分 
大 时 , loglon 人 | 在 |-cel 上 一 致 有 界 , 且 log |gn( 四 | 一 0, 故 由 弱 对 称 化 不 等 式 ( 引 
理 6.1.2) 及 特征 函数 性 质 5.3.9 的 第 二 个 不 等 式 , 有 














2 (2|>}) < Yr (|>) 
< 一 人 loglgn(Pdu 一 0 (mn 一 co)， (6.2.2) 


其 中 最 后 一 步 是 利用 控制 收敛 定理 . 下 面 先 证 明 {Xk/n,k = 1 ,n} 满足 无 穷 小 
条 件 , 即 对 任意 e > 0， 


Xk 
lim max 了 | | 一 
n=001<kgn n 








> =0. (6.2.3) 


设 5>0 也 是 任意 取 定 . 由 S%/n 上 ;0, 存在 N = N(e 5 当 > N 时 ， 
S 


(| 
n 
于 是 对 任意 n>k> 入 ,有 
P(| 芝 <2) >?(| 共 
n k 
_1 天 一 工 
-=P (里 - 吕 4. 生 站 < 


Sk 
> 一 一 
(|- 


> 1— 25, (6.2.4) 








<e) >1-6 























其 中 最 后 一 步 利 用 了 事实 P(ANn B) > P(4) +P(B) -1 而 对 一 切 k < N, 存在 
N' = N'(e9), 使 得 当 n > N' 时 ， 





全 | < 9 >1-56. (6.2.5) 
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结合 式 (6.2.4) 和 (6.2.5) 得 证 式 (6.2.3). 注意 到 如 下 事实 : 对 任意 随机 变量 关 , X 
的 中 位 数 必 含 于 任 一 满足 P(X & J 之 1/2 的 区 间 J 内 ,我们 知 式 (6.2.3) 蕴涵 了 


lim max =0. (6.2.6) 


no001&<k<n Nn 
再 注意 到 c > 1, 由 式 (6.2.2) 和 (6.2.6) 得 条 件 (1) 成 立 . 
设 甩 为 Xk 的 分 布 函数 , 对 任意 1 kk<& nn， 


(个 :) = Dv (I < 2 :| 
一 六 > | | elasn) — yllvgn}) dmd 
k=1 
1 忆 . ， 
一 7 ~ y)2dF (rz)dP 
>Jim ian y) dd 人) 
2 忌 co » 
二 天 2_P(Xx| > 由 人 2V Tysn}dFr(y) 
k=1 
1 ec roo roo 
S 天 2 J 、 | — Tsys2n} dF (x)dF(y) 
天 一 1 
+2 P(Xk| >n) 


k=1 


XEL 
-42a| 大 1 sam | 





十 2 > P(X| > n). (6.2.7) 
k=1 


由 特征 函数 性 质 5.3.9 的 第 一 个 不 等 式 及 gn(t) 一 1, 有 

















TE |<2n} 二 1 AN] 
os | 
k=1 k=1 
<-3D1oglf (去 ) 
k=1 
1 \ | 
= —3 log |gn, (去) —0 (mn 一 oo)， (6.2.8) 








其 中 第 二 个 不 等 式 利用 事实 : 1 -a < -loga, Va e (0,1]. 由 式 (6.2.7), (6.2.8) 和 已 
证 得 的 条 件 (1), 得 条 件 (2) 成 立 . 
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由 S/n 一 ;0 及 条 件 (1), 同 充分 性 中 的 证 明 得 
工 > Yo -0 
Nn ™ . 
k=1 
由 Chebyshev 不 等 式 和 条 件 (2)， 
p (: 
nN 


> (ze — EYnx) 


>) < < ve ( 一 0 














£1 
故 n 
- ) £0, 
从 而 ， 
2 DB) = 7 和 2 Yi 一 二 1 D0 一 一 0， 
即 条 件 (3) 成 立 . 上 


推论 6.2.1 若 {Xn} 为 独立 同 分 布 的 随机 变量 序列 ( 简 记 为 iid 序列 )， 则 
Sn/n 上 0 的 充分 必要 条 件 是 

(1)’ nP(IXi| > 1) — 0; 

(2) E [Xilxs say] — 0. 


证 我 们 只 要 证 明定 理 6.2.1 中 条 件 (1) 能 推出 条 件 (2) 即 可 . 由 于 {XX} 为 
iid, 条 件 (2) 等 价 于 
TVar (XiT{Ixilgn}) 一 一 0. (6.2.9) 


事实 上 , 由 条 件 (1) 可 推出 
2 也 [XIIxisn}] 一 0， (6.2.10) 
这 是 由 于 


n 
E [XiIxign)] = DE [X?Hy 1<xi gn}] 


j=1 


nn 
< FPG -1<|X| gD) 
j=1 
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nn 了 

&2 SY iPY -1<|X| gD 
j=1 i=1 
nn nn 

=22_1i2, P(j—-1<|Xi| gD) 


i 
a. 
i 


J 


iPGi-1<|Xi|<)) 


~. 
| 
记 


nn 
2) iP(X|>i-1) 
:一 1 
< 2+22 ,iP(Xi| > 0). (6.2.11) 
i=1 


注意 到 事实 , 如 果 on 一 0, 则 工交 ak 一 0, 由 条 件 (1) 和 式 (6.2.11) 即 知 式 (6.2.10) 


成 立 , 从 而 条 件 (2) 成 立 . | 
如 果 E[X1] 存在 有 限 , 则 E[XiTf|xl>n}] 一 0. 由 Chebyshev 不 等 式 知 





nP(|Xi|>n) <E[Xilx>n}l 一 


因此 我 们 可 得 到 如 下 推论 . 


推论 6.2.2(Khintchine 弱 大 数 律 ) 如 果 {X;,} 为 iid 随机 变量 序列 , 且 E|Xi| < 
co, 则 


Sn 上,EfX] 
也 


例 6.2.1 设 jn 是 次 Bernoulli 试验 中 事件 4 出 现 的 次 数 , 在 每 次 试验 中 事 
件 4 发 生 的 概率 为 P(4), 则 


Ln P， 
2 (A). 


证 令 Xh 表示 在 第 大 次 试验 中 事件 4 发生 的 示 性 变量 ， P(X = 0) = 1-P(A), 
P(X = 1) = P(A4), 则 庆 ,… ,Xn 为 iid 随机 变量 , 且 jn = Xk 因此 由 推论 
6.2.2 立 得 上 结论 4 

例 6.2.2 设 {Xn} 是 独立 的 随机 变量 序列 , 其 中 Xi = 0, 且 当 mn 之 2 时 Xn 服 
从 二 点 分 布 : P(X = 土 Viog7n) = 1/2, 证 明 {Xn} 服从 大 数 定律 . 
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证 我 们 来 逐条 验证 定理 6.2.1 中 的 条 件 (1) ~ (3). 由 于 logk < < n, 故 条 
件 (1) 满足 且 T{|xil<n} =1,k=1,...,n, 





让 Dv Xk) = 方 》 iogks mogn n+1l ,0， 
天 一 1 
故 条件 (2) 满足 , 而 条 件 (3) 显然 满足 . 由 此 知 {Xa} 服从 大 数 定律 . 4 


6.3 中心 极 限定 理 


通俗 地 讲 , 中 心 极限 定理 就 是 许多 个 均匀 小 的 独立 和 的 分 布 函数 弱 收 敛 于 正 
态 分 布 . 所 谓 均 匀 小 是 指 每 个 随机 变量 在 和 式 中 可 被 忽略 . 首先 我 们 讨论 最 简单 的 
一 种 情况 . 

定理 6.3.1 设 {Xn} 为 iid 的 随机 变量 序列 , 且 BIXn] = a, Var(Xn) = 02 > 0， 
则 有 


Sn — na 
ovn 
其 中 N(0,1) 表示 标准 正 态 随 机 变量 . 


证 不 失 一 般 性 , 可 假定 a = 0, 否则 以 Xn 一 a 代替 X 即 可 . 设 Xn 的 特征 函 
数 为 f. 由 iid 性 质 知 5%/(oVn) 的 特征 函数 为 f"(t/(oV7))， 由 完全 收敛 性 准则 ， 


只 要 证 明 
nf > —t2/2 
/ (5 


Hl) =1— T+B0), 
其 中 8()/ 如 一 0 (t 一 0), 故 


dGoN Ga 


证 毕 . 


兰 N(0,1), 


即 可 . 由 定理 5.4.2 知 
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引 理 6.3.1 设 2 ,zm 和 wi1,… ,wm 是 模 不 大 于 1 的 复数 , 则 


m m m 
ne 
k=1 k=1 


k=1 








这 对 m 用 归纳 法 即 可 得 到 . 
基于 引 理 6.3.1, 我 们 可 以 给 出 式 (6.3.1) 的 另外 一 种 证 明 . 在 引 理 6.3.1 中 取 


( ) 
m=n, zk=1——, w=f|(—=|), 
27n ovVn 
则 得 











而 (1 一 万 /(2m)7” 一 e- 7/2, 所 以 式 (6.3.1) 成 立 . 

容易 知道 , 在 定理 6.3.1 的 条 件 下 , Si,/n 一 > ao. 上 述 中 心 极限 定理 则 指 了 在 iid 
情形 下 的 5%/n 趋 于 a 的 速度 . 设 0<5<1/2, 则 对 任意 ee > 0, 有 
on > 9 一 dian ( > Sm) 


lim P ( 2 
了 一 CO nN 
lim 


2 oO 2 
< — -t /2dt = 
一 noo V2n J so € dt 0， 


ns (这 一 ) 卫 ， 0. 
nN 
例 6.3.1 设 从 参数 为 、 的 指数 分 布 总 体 中 抽 得 容量 为 n 的 一 组 样本 {Xi1,…， 
Xn), 由 于 到 。= 上 沁 Xi 依 概 率 收敛 于 总 体 的 均值 1/X, 故 可 用 1/ 玉 ,来 估计 入 
但 估计 精度 如 何 ? 由 于 指数 分 布 方差 为 1/X?, 由 定理 6.3.1 知 
AVN (x, - i) YY, N(0,1). 


由 第 5 章 Skorohod 嵌入 定理 (定理 5.1.2), 存在 同一 概率 空间 (12', sxY,P') 上 的 随机 
变量 六 和 YY, 它们 的 分 布 与 X。 和 N(0,1) 相同 , 且 对 每 个 w e 12 


Sn — na 


ovn 


—Q 














即 


A (Fat) = 一 Yo 
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现在 了 ,(w ) 一 1/ 和 , 以 及 











( > ) Yo) 
入 \Yn,(w)) MY (to ， 
但 -站 服从 标准 正 态 分 布 , 因而 
vm /1 2 
(二 宇 No 
即 1/XX;, 的 分 布 近似 于 均值 为 和 , 方差 为 X2/jmr 的 正 态 分 布 . 本 
下 面 研 究 独立 不 同 分 布 情形 下 的 中 心 极限 问题 . 
设 有 随机 变量 阵列 
X11, 站 X1k) 
X21, + Xoks 
(6.3.2) 
Xn1, 四 Xnk,, 


其 中 每 一 行 中 的 随机 变量 独立 (不 同行 之 间 的 随机 变量 不 必要 求 独立 ), 这 种 阵列 
称 为 随机 变量 的 三 角 阵列 . 令 


kr 
Sn 一 > Xnj, 
i=1 


设 当 nn 一 co 时 , kn, 一 oo. 定理 6.3.1 证 明了 kn =n, Xnj 二 XX; 及 {X iid 情形 下 
的 中 心 极限 定理 . 下 面 我 们 将 对 (6.3.2) 的 随机 变量 三 角 阵 列 研究 5,, 的 极限 分 布 
问题 . 这 一 问题 的 一 般 提 法 (最 初 由 Lévy 指出 ) 是 : 

(1) 5% 的 一 切 可 能 的 极限 分 布 是 什么 ? 

(2) Sn 的 分 布 收 敛 于 指定 分 布 的 条 件 是 什么 ? 

但 是 , 如 果 我 们 对 独立 加 项 Xu。; 不 加 任何 限制 , 则 问题 (1) 的 提 法 就 毫 无 意义 . 
例如 , 设 Y 为 任 一 随机 变量 , 令 Xi = 了 Xnj = 0, j > 2, 则 5% = 了, 因而 $; 的 
分 布 就 是 Y 的 分 布 , 所 以 一 切 可 能 的 极限 分 布 包含 了 任何 一 个 分 布 . 因此 需要 对 

为 了 寻找 出 一 种 比较 符合 实际 背景 的 限制 , 可 以 考察 一 些 能 导致 这 种 限制 条 
件 的 问题 . 这 些 问题 的 共同 点 就 是 加 项 的 个 数 可 以 无 限 增多 , 而 当 去 掉 任意 有 限 多 
项 时 其 极限 分 布 不 变 , 即 每 个 加 项 在 S。 中 所 起 的 作用 是 很 小 的 , 当 mm 很 大 时 , 每 个 
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加 项 都 是 可 忽略 的 . 这 个 限制 称 为 uan 条 件 (uniformly asymptotically negligible). 
用 概率 的 语言 来 表达 即 为 : 对 每 个 e > 0， 


max P(|Xn;| > el) 一 0. 
1&j&kn 


因此 中 心 极限 问题 的 确切 提 法 是 : 
中 心 极限 问题 设 Ss 二 从,j, 其 中 {Xj} 满足 uan 条 件 , 且 hi 一 00. 
j=1 


(1) 找 出 Sn 的 一 切 可 能 的 极限 分 布 . 

(2) 找 出 Sn 的 分 布 向 指定 极限 分 布 收敛 的 条 件 . 

这 一 问题 的 圆满 彻底 解决 主要 依靠 特征 函数 这 一 有 力 工具 . 若 以 fh 和 fj 分 
别 表 示 5S, 和 Xn; 的 特征 函数 , 则 根据 完全 收 和 敛 性 准则 , 上 述 中 心 极限 的 两 个 问题 
转化 为 : 

(1) 找 出 可 使 户 一 的 一 切 特 征 函 数 /. 

(2) 设 f 为 指定 的 极限 分 布 特征 函数 , 找 出 户 一 了 的 条 件 . 

中 心 极限 问题 的 解决 归功 于 : Finetti 引入 了 “无 穷 可 分 "分布 族 ; Kolmogorov 
发 现 了 二 阶 和 矩 有 限 情形 下 的 显 式 表达 式 ; P. Lévy 发 现 了 一 般 情形 下 的 显 式 表达 
式 . 经 过 诸多 概率 论 大 家 的 努力 , 一 般 情 形 下 的 中 心 极限 问题 已 获 解 决 . 由 于 一 般 
情况 下 的 计算 比较 繁琐 , 所 以 本 书 中 我 们 仅 介 绍 “ 方 差 有 界 情形 ”下 的 中 心 极限 问 
题 . 但 这 一 情形 下 的 入 手 和 一 般 情形 是 相同 的 . 读者 可 参考 Loeve 的 “Probability 
Theory” 这 里 介绍 的 “方差 有 界 情形 ”下 中 心 极限 问题 的 叙述 也 主要 来 自 于 Loeve- 

设 式 (6.3.2) 中 的 随机 变量 满足 

EX =0, 了 Xi] = ony, 


kn (6.3.3) 
B= ai 1&j& hn. 
j=1 


以 下 以 已 和 i; 分 别 记 Xn; 的 分 布 函 数 和 特征 函数 , Sn 的 分 布 函数 和 特征 
函数 分 别 记 为 和 f. 方差 有 界 条 件 (C) 是 指 


k 


max 02 一 一 0， > 0a, = B? &c<+o, (OC) 
1&j&kn j=1 


其 中 e 是 不 依赖 于 n 的 常数 . 
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由 条 件 (C) 可 推出 uan 条 件 : 这 由 Chebyshev 不 等 式 


1 
P X 所 一 
PP(UXnl > 9 < BD, 


02, 一 0 
即 得 . 
我 们 将 用 特征 函数 来 讨论 中 心 极限 问题 证 明 思路 大 体 是 
(1) fn — f > Soe fn; — log 
j=1 
kn 


(2) llog jj 的 一 (fa 的 一 1] — 0, tgT,; 


5=1 


(3) 令 
kn 
wn(t) -2 fnj(t) — 1) = _(e 一 工 一 jz) 有 5 Tg, (z), 
其 中 
kn, 
Ka(z)=| yd BB ml) ， 


则 ew* 是 特征 函数 且 如 一 多 当 且 仅 当 Kn 一 > K. 
下 面 用 引 理 的 形式 来 证 明 上 述 思 路 中 的 结论 , 然后 来 叙述 中 心 极限 问题 . 


引 理 6.3.2( 比 较 引 理 ) 在 条 件 (C) 下 , 对 每 个 固定 的 t, 当 n> no(t) 时 , log fj(t) 
存在 有 限 且 





kn 
Sllog fay(t) — (fas(t) ~ 1)] — 0. 


j=1 
证 由 于 EE[Xn;] = 0, 由 定理 5.4.2， 
2 
fni(t) 一 工 一 On 


其 中 |9w| < 1, 故 由 条 件 (C) 推 知 


2 
2 
Da (fnj(t)—1| < 本 on; — 0， 


ee 2 C2 
wo —1|< 7 < at 
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于 是 对 每 个 固定 的 已 存在 no(?), 当 n > no(t) 时 对 一 切 了 和 per, [fnj(t) 一 1| < 1/2, 
所 以 log fj(t) 存在 有 限 , 且 有 Taylor 展开 


log fas(t) = fry(D) —1+0 fa — 1, 1gj<k,, 
其 中 |9%;| < 1. 因此 
kn 


kn 
Dorf) -fH < Hd) -1 


了 7 一】 


< max |fa(t)—1. >， 的 下 


1&j<kn - 
1&j&kn 
t2 2 
F110, mat 0 
引 理 得 证 . 四 
令 
kn kn oo 。 
= (fas(t) —1) | ee — DdFnj(z), 
一 oo 
了 7 一 工 j=1 
由 EX 0 生 02; < c, 故 上 式 可 写 为 


了 一 1 
pm co  ， 1 
yn(t) = 2 | ee -1-itm) 7dF(7) 


1 
全 全 | ( et — 1— itr) ) dKn (2), 


其 中 
kn. 
二 >》 | ydFny (y) 
j=1 
这 是 及 上 的 一 个 非 降 右 连续 函数 , 满足 
Kn(—00) = 0, Var Kn <c<o%, 


即 与 通常 的 分 布 函数 仅 相差 一 个 常数 因子 . 同时 在 如 的 表达 式 中 被 积 函数 在 x = 
0 处 的 值 由 连续 性 来 确定 , 即 为 一 妇 /2. 
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上 上述 类 型 的 函数 在 这 一 节 中 将 以 区 和 天 (或 附 有 下 标 ) 来 表示 , 因此 以 下 光 总 

表示 由 
w(t) = [-. (si ~ 1 ~ itr) Lak(z) (6.3.4) 

所 确定 的 民 上 的 一 个 函数 ， 而 其 中 K 与 一 个 分 布 函数 仅 相关 一个 常数 因子 
K(-00) =0, VarK < c.Y 和 KK 若 有 下 标 时 下 标 总 保持 相同 . 

引 理 6.3.3 ev 是 一 个 特征 函数 , 其 对 应 分 布 的 一 阶 手 为 0, 方差 为 Var K < co， 
并 且 它 是 在 条 件 (C) 下 的 一 个 极限 分 布 . 

证 在 ww 的 表达 式 中 , 被 积 函数 是 二 元 连续 函数 , 当 |t| < TT 时 它 随 着 |x| 一 co 
而 一 致 趋 于 零 , 故 东 是 了 上 的 连续 函数 , 且 可 表 为 如 下 形式 的 Riemann-Stieltjes 积 
分 和 序列 的 极限 : 


p(t) = 三 e itt) Dak(z) 


= lim 全 (eite 1 itz) -5dK( 


多 一 Co vv/ 一 


| 


. i . 1 
= 2 (er 一 工 一 Heng) K ons omit1] 


全 im > ， {itanj + Anj(eitw — 1)}, (6.3.5) 
了 
其 中 
Mnj = KTnj, Tnjtll, an = —MnjTny, bnj = Tnj. 


nj 

在 上 面 和 式 中 可 取 各 分 点 xw; 关 0, 则 式 (6.3.5) 中 每 个 加 项 都 是 一 个 Poisson 型 特 
征 函 数 的 对 数 , 所 以 积分 和 也 是 一 个 特征 函数 的 对 数 , 由 完全 收敛 性 准则 知 积分 和 
的 极限 多 也 是 一 个 特征 函数 的 对 数 . 关于 算 的 断言 , 可 直接 计算 得 出 


Ge ) 
最 后 , 要 证 ev 是 在 条 件 (C) 下 的 一 个 极限 分 布 , 即 能 找到 独立 随机 变量 序 
列 {Xoj} 满足 条 件 (C), 而 时 Xnj 的 特征 函数 趋 于 ey, 在 这 里 取 各 = n, Xny， 


j= 1,..….,n, 是 有 公共 特征 函数 ev/n 的 id 随机 变量 序列 . 由 于 多/n 和 K/n 相对 

应 , 故 o2; = 二 Var 五 , 而 E[Xnj] = 0, 则 3 Xnj 的 特征 函数 为 ey, 且 条 件 (C) 成 
j=1 

立 , 故 ev 是 在 条 件 (C) 下 的 极限 律 . 





= Ws0 = 0, (er)"| = wp |i0 = —Var K. 


t=0 t=0 
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引 理 6.3.4( 唯 一 性 引 理 ) 少 与 是 一 一 对 应 的 . 
证 因为 
-w= [eaK(), 
故 由 逆转 公式 K 被 W' 决定 , 因而 被 % 决定 . 反之 则 是 明显 的 . 
引 理 6.3.5( 收 敛 性 引 理 ) 设 条 件 (C) 成 立 , 如 果 Ks 一 天, 则 加 一作 反之 ， 
车 一 log 了, 则 K 一 K, 是 logf 就 是 KK 所 确定 的 久 . 


证 正 命题 由 定理 5.1.3 推出 , 现 来 证 逆 命题 . 由 于 sup, Var Kn 所 c < 十 00, 故 由 
定理 5.1.1 知 存在 一 个 分 布 函数 扩 , Var K < c, 及 子 序列 {nC {nj}), 使 Kn: 一 K， 
因此 由 已 证 的 正 命 题 知 ww 一 功 又 因为 已 知 ,一 log f, 所 以 y= logf. 根据 唯 
一 性 引 理 , % 决定 了 K, 由 此 知 Kn 一 K. 上 


下 面 我 们 转 到 中 心 极限 问题 上 来 . 

定理 6.3.2( 方 差 有 界 极限 定理 ) 设 独 立 加 项 {Xj} 满足 条 件 (C) 且 E[Xnj] = 0， 
了 一 1, “0 , ken. 

(1) 如 果 二 fn; 一 > f, 则 了 必 是 特征 函数 且 log f= 少 , 其 中 必 由 式 (6.3.4) 定 


义 , 而 是 民 上 上 非 降 右 连 函数 ， Var KK < c < oo; 满足 定理 条 件 的 随机 变量 和 的 一 
切 可 能 的 极限 分 布 的 特征 函数 必 可 表 为 e*. 


四 设 了 一 eg 几 由 式 63 定义 , 则 5 = 53 Xo 依 分 布 收 化 于 ev 对 应 的 
分 布 函数 的 充分 必要 条 件 是 有 ,KK 其 中 到 ,由 下 式 确定 ， 


Kn(z) = >[. yrdFny(y). 


如 果 bab 区 c<o0 换 成 bo < o00; 则 Kn 一; KK 可 改 为 Kn 一 KK. 


证 由 引 理 6.3.2 知 在 条 件 (C) 下 , 有 log IJ jp 一 wn 一 * 0. 再 由 引 理 6.3.3 和 
J 
引 理 6.3.5 即 可 推出 结论 (1). 


结论 (2) 由 (1) 及 引 理 6.3.5 即 可 推出 . 而 最 后 所 说 的 特殊 情形 是 由 于 新 的 假 
定 可 写成 


kn 
Var Kn, = 》 02 一 oa” = Vark. 
i=l 
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证 毕 . Il 
以 上 所 考虑 的 随机 变量 都 是 以 期 望 为 中 心 的 . 如 果 去 掉 这 一 条 件 , 并 令 


anj = ElXny], Fry(¥) = Fny(¥ + any), 
fni(t) = eo fns(t), 

即 所 ; 和 所 ; 是 X -any 的 分 布 函数 和 特征 函数 , 则 用 后 ; 和 所; 代替 瑟 y， 和 fj， 
则 以 上 种 种 结论 仍然 成 立 . 具体 地 , 若 我 们 把 此 时 的 区 改 记 为 , 回 到 非 中 化 随机 
变量 , 极限 分 布 有 如 下 特点 : 具有 有 限 方差 , 期 望 值 a (不必 为 0), 对 应 的 特征 函数 
为 expfita 十 她 从 } 唯一 性 引 理 ( 引 理 6.3.4) 变 为 : 决定 a 与 及, 反之 亦 然 . 收敛 
性 引 理 ( 引 理 6.3.5) 中 Kn 一 KK 换 成 Ki, 一; K 及 an 一 a. 极限 定理 (定理 6.3.2) 
中 也 作 相 应 变动 , 其 中 


kn 
an 一 >》 onj 
7=1 
且 Fj 换 成 五; 这 样 定理 6.3.2 中 结论 (2) 变 成 
定理 6.3.3( 推 广 的 收敛 性 准则 ) 设 独立 加 项 {Xj} 满足 条 件 (C), f= expfita+t 
(有 )}, 其 中 六 由 式 (6.3.4) 确定 , 则 Su = 里 Xj 依 分 布 收 敏 于 了 对 应 的 分 布 函 数 
的 充分 必要 条 件 是 


no 
w 
Kn > K, > Qnj > 人， 
j=1 


其 中 


kn z 
Fn) = | ydFaj(y + an), ans = ELXn]. 


j=1 
kn kn ww Cc 
如 果 2 oij < c<oo 换 成 2 oa 一 a2 <o0, 则 Kn 一 >K 可 改 为 K 一 KK. 
el j=1 


如 果 选 取 不 同 的 到, 则 可 得 到 不 同 的 极限 分 布 . 

推论 6.3.1 (1) 正 态 分 布 N(0,1) 对 应 yy 人 = 一 如 /2, 相应 K(x) = Tlo,oo) (2). 
kn, 

(2) ( 正 态 收敛 性 准则 ) 设 独立 加 项 {Xwj} 满足 E[Xwj] = 0, > c2 = 1, 则 
j=1 
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的 充分 必要 条 件 是 对 每 个 e > 0， 
kn 
gnfe) = 2 iw rdFij(7) — 0 (1 一 co). (6.3.6) 


证 绪论 (1) 显然 , 以 下 仅 证 结论 (2). 由 于 “ 


2 ”2 
max on; = max | rdFnj(7) 
1&jEkn 1&j<kn JJ 一 co 


一 24m fm) 2 
St ae 


故 若 对 每 个 e> 0 有 gn(e) 一 0, 则 1 02; 一 > 0, 即 定理 6.3.2 的 条 件 全 部 满足 . 
设 x > 0, 则 


n 


kn l 
Kao) = wary) < Df, sa) 0 
j=1 


了 一 上 


kn oo 
Kn(z) = 2, ( 刻 ydFnj(y) 一 | y dFn; (W) 


j= 
kn kn, 


kn 
2 
i 3 了 1, 
1 2 amsg) 一 


即 Ka(z) 一 ; 1io,oo)(z). 由 定理 6.3.2 知 f(t) -一 e 瑟 /2 即 中 心 极限 定理 成 立 . 
反之 , 设 Sn < 也， mN(0,1) 且 Da 0o2; 一 0， 则 定理 6.3.2 的 条 件 满 足 , 故 由 

所 (一 ee/ 知 Kn(zZ) -> Tio.oo)(z). 由 此 立 得 gn(e) 一 0 Ye> 0. | 
注 1 设 {Xi,n 之 1} 为 一 个 独立 随机 变量 序列 , 满足 


EL[X;] =0, Var(Xj))=07 <00, ViZ>1. (6.3.7) 
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其 中 b > 0. 此 时 , 条 件 (C) 等 价 于 
oF 
Ta， 忆 一 一 0; (6.3.8) 


条 件 式 (6.3.6) 即 为 
1 nn 
站 2B [Xl Kxil>eos] —0, ve>0. (6.3.9) 


在 文献 中 , 式 (6.3.8) 称 为 Feller 条 件 , 式 (6.3.7) 和 (6.3.9) 称 为 Linderberg 条 件 . 由 
推论 6.3.1, 立 得 Linderberg 中 心 极限 定理 , 即 若 独立 随机 变量 序列 {X,n > 1} 满 
足 Linderberg 条 件 , 则 


S, = DX- 站 二 (6.3.10) 


注 2 设 零 均值 的 独立 随机 变量 序列 {X%,n > 1} 满足 Linderberg 条 件 , 则 
Feller 条 件 及 
max | = —0 (6.3.11) 


1&ij&n bn 
成 立 . 前 者 由 推论 6.3.1 得 到 . 我 们 证 明 式 (6.3.11). 对 任意 e > 0, 由 Chebyshev 不 
等 式 得 


XN pfr 
P (we, p>)=P De, | > ebn =P UU {xi > ct] 


< Pd > ebn) 








n 
< > 可 


式 (6.3.11) 说 明 , 如 果 独 立 随机 变量 序列 {X,,n > 1} 满足 Linderberg 条 件 , 则 每 
个 随机 变量 在 正则 化 部 分 和 中 所 起 的 作用 都 随 着 n 增 大 而 趋 于 微不足道 . 其 次 , 式 
(6.3.11) 列 洒 了 b2 一 oo. 


推论 6.3.2(Lyapunov) 设 {Xn,n > 1} 为 独立 随机 变量 序列 , 满足 式 (6.3.7). 
如 果 存 在 5 > 0, 使 得 


2 E [Xl Hx;l>eb,}] 一 





1 n 
7 >》 EIX,jl?+5 — 0, (6.3.12) 
n j=1 
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则 式 (6.3.10) 成 立 . 条 件 式 (6.3.12) 称 为 Lyapunov 条 件 . 
证 由 注 1 知 , 我 们 仅 需 证 明 式 (6.3.12) 蕴涵 式 (6.3.9) 即 可 . 对 任意 e > 0, 利 
用 Chebyshev 不 等 式 得 
工 
E [XP “ TIxl>eosy] < BE [IX “ TI>eps]] ， 了 三 1 7 


于 是 

1 n nn 

2 [Xi] Hixyi>eba)] < ED 一 人 0. | 

n 3=1 n j=1 

极限 分 布 族 中 另 一 个 重要 分 布 是 Poisson 分 布 , 对 应 的 特征 函数 为 
f(t) = exp{it 和 + Mei: ~ 1 — it)}, 

即 w(t) = A+ A(et —1—it)= A+ b(t), 对 应 于 K(z) = ATl1,00) (7), 因此 由 定 
理 6.3.3 可 得 


推论 6.3.3(Poisson 收敛 性 准则 ) 如 果 独 立 加 项 {Xny} 满足 


kn 
2 2 
max on; 一 0， 0n; 一 一 入 
1<jSkn 气 


则 5，= Sx 依 分 布 收 敛 于 参数 为 A 的 Poisson 分 布 的 充分 必要 条 件 是 


从 EIXj] ,和 且 对 每 个 <>0 有 
1 


J 二 
kr 
2 , . 
> hi zdFiy(z + EIX,]) —» 0. 


由 推论 6.3.1, 我 们 得 到 Lindeberg 条 件 等 价 于 5S;, 过; N(0,1) 及 式 (6.3.8), 而 
式 (6.3.8) 可 推出 uan 条 件 . 现在 很 自然 会 问 , 5 之; N(0,1) 与 哪个 条 件 等 价 ? 

例 6.3.2 设 {Xn} 为 独立 随机 变量 序列 , Xi ~ N(0,1), Xk ~ N(0,2*-2),k 之 2， 
则 有 


n 
Xi n 
J 三 一 一 
Sn= 一 2 (n D2 XI 
> Var(X) = 
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易 见 E[S,] = 0, EIS2] =1,n 之 1, 故 Si ~ N(0,1), 但 uan 条件 和 Lindeberg 条 件 都 
不 成 立 (读者 可 以 验证 )， 这 说 明 Lindeberg 条 件 是 中 心 极 限定 理 成 立 的 一 个 充分 
条 件 . < 


事实 上 , 我 们 可 以 证 明 如 下 的 结果 . 
定理 6.3.4 设 {Xnj,j7 = 1,… ,n} 为 独立 随机 变量 序列 , 满足 


E[Xnj] =0, Var(Xnj)=02;, Yo2;=1. 


j=1 


记 Xnj 和 N(0,1) 的 分 布 函数 分 别 为 Fy 和 GB, 则 5, =- 六 Xj 之 ; N(0,1) 的 充 
j=1 
分 (实际 上 也 是 必要 的 ) 条 件 是 对 每 个 。> 0, 有 


> 】 |[z| :|F(7) ~ Bnj(z)| dz 一 0， (6.3.13) 
j=1 


其 中 Bnwj(z) = GB(z/onj). 其 次 , Lindeberge 条 件 可 推出 式 (6.3.13) ， 
证 以 fj, 及 ,Pp 和 prj 分 别 表示 Xj, Sn, 和 Bj 对 应 的 特征 函数 , 则 


2 2 
p(t) = exp 人 3) ， ‘Pnj(t) = exp 他 ?| . 


由 完全 收敛 性 准则 , 5S;， 之 ;,N(0,1) 当 且 仅 当 所 一 p， 由 引 理 6.3.1, 并 注意 到 
ElXnj]=0 和 >, 0 =1 有 
j=1 


|fn(t) — 2(A| = 





0 -用 pnilt) 





< Pl (Wp) = ea( Frs(z) -mu 人 
=1 





oo 。 1 
_ww (er — itz 一 er ) d(Fny (zx) 一 Pnj (7x)) 。 





(6.3.14) 
对 任意 a < 已 由 分 部 积分 得 
(e* 一 itz 一 ew) d(Fnz(Z) — Bnj(7)) 
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= (Fnj(2) — Bns(7) (er 一 itz 一 er) 


a 





_it (ez 1 tr) (Fay() — Bnj(2))dz. (6.3.15) 
由 于 E[X2,] = 02, 存在 , 故 当 x 一 +co 时 ， 
x (1 — Fnj(7) + Fnj(—2)) — 0, 
Z2(1 — Bnj(7) + Gn;(—2)) — 0, 
故 在 式 (6.3.15) 中 令 ga 一 一 00,b 一 co, 得 
厂 (ee 一 itz 一 See) d(Fj (2) — Bnj (7)) 
= -六 人 (ee 1- itr) (Fa(7) ~ Bnj(z))dz. (6.3.16) 


由 式 (6.3.14) 和 (6.3.16)， 


fnlt) = pO < DH | (ee 1 itz) (Fry(2) ~ Bny(z))dz 
j=1 
1 n 
< il J lw 一 wz)ldz 
+ 2 > a [ol Hao milz)ldz 
< 2 > sar | [Fw (5) 一 mi(zjldz 


t 
十 全 (6.3.17) 


在 上 面 最 后 一 个 不 等 式 中 用 到 EIX|?=2f/0 zx(1 一 F(x)+F(-z))dz 及 |Fnj 一 
Fnj 十 更 由 于 e 式 任意 的 , 故 由 式 (6.3.17) 和 (6.3.13) 推出 f4,( 一 机 
下 面 证 明 Lindeberg 条 件 丝 涵 式 (6.3.13). 
由 于 Lindeberg 条 件 蕴 涵 max o3; 一 0, 又 因为 六 o2; = 1 故 由 有 界 方差 收 
SIN ;二 1 
伍 定 理 , 对 每 个 。> 0, 有 


和 2 上 sa 7 dm (7) < > ons Jiass maxk onk} 2“d5(7) 


j=1 
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=| z2dg(z) — 0, (6.3.18) 
{zl>e/ maxk onkg} 


从 而 
Df zd(Fn(z) + Bnj(7)) 一 0. 


固定 e > 0, 取 连 续 可 微 偶 函数 h(z), 使 之 满足 如 下 条 件 : |h(z)| < 23, h(x)sgn(z) > 
0, 当 |z|>2e 时 h(z)=22; 当 |z| <e 时 hlz)=0; 当 < |z| <2e 时 |W(a)| < 4 
(例如 , 取 


0， |z| < € 
h(z)= $4 (2—e)?(1l2e— 47x)/e, e<l|z| 2e 
Z2， [zl > 26， 


则 h(z) 满足 上 述 要 求 ), 则 由 式 (6.3.18) 及 下 面 的 关系 式 
> | dal>e Z) d(Fnij (2) + Bnj(z)) 一 0. 
对 上 面 左边 分 部 积分 , 则 当 ? 一 co 时 有 


2 Jisa (Zl — Fnj(2) + (1 ~ Bnj(2))]dz 


-2 } 17) d(Fns(z (2) 十 Bi (7)) 一 0, 


Df YW) [F(z) + Bns(2))]dz 


j=1 
> 。 h(z)d(Frs(7) + Bnj(7)) — 0. 


当 |z| > 2e 时 h(x) = 2z, 因此 我 们 得 到 式 (6.3.13). ll 
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6.4 正 态 逼 近 速度 


6.4.1 用 特征 函数 来 估计 正 态 逼 近 的 速度 


在 上 一 节 中 已 经 证 明了 在 一 定 的 矩 条 件 下 规范 化 独立 随机 变量 和 分 布 , 依 
分 布 收敛 于 正 态 分 布 $B， 一 个 自然 的 问题 是 F(x) 与 8(z) 之 间 的 误差 有 多 大 ? 
本 节 在 三 阶 绝对 矩 存 在 的 条 件 下 讨论 了 这 一 问题 . 这 就 是 著名 的 Esseen 不 等 式 和 
Berry-Esseen 不 等 式 . 为 此 , 我 们 需要 如 下 的 引 理 . 

引 理 6.4.1 设 下 为 随机 变量 的 分 布 函数 , f(t) 为 其 对 应 的 特征 函数 , 用 B(x) 
和 y(t) 分 别 表示 N(0,1) 的 分 布 函数 和 特征 函数 . 设 了 为 任 一 正 整 数 , 则 对 任意 
b > 1/(2n), 有 


sup |F(z) — $(z)| 
rER 


r |jg-eg| MN 4c(ob 1 
<b| | (arr 和 
其 中 c(b) 为 只 依赖 于 5 的 正常 数 , 且 在 式 (6.4.1) 中 可 取 c(b) 为 如 下 方程 的 解 : 


| sin2 了 
0 U2 





(6.4.1) 





TT 
4 二 本 十 机 


证 设 T>0 及 a>0, 由 第 5 章 知 g(t) = (1 一 | 丰 Jfjlg1) 为 Polya 型 特征 函 
数 , 其 对 应 的 概率 密度 函数 为 


F(z) = 元 (2) ， rER. 


由 此 知 h() = (1 一 /TJeite/TI(ggr} 为 特征 函数 , 其 对 应 的 概率 密度 函数 为 


T 1—cos(Tr—a) TT /sin((Tr—o)/2)N\ 了 
nx (Tz—a)? -去 ( (Tz — a)/2 ) < 7 





p(X) = 


7=7(0) = plz)dz, 
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则 
du. 





2 ra/2 sin?2 
了 二 元 村 22 
由 于 顾 非 城 , 故 
Ps Fp sdu 


= G(z) + > 广 ”eco -ec)pw 一 ad 


> fre — Bu))p(u — x)du 


< Br)+ 元 和 [S$(z+y) — G(r) du 


-ap 一 ad 


< GB(z) 十 





c_ 1 1 fT (reo) — GB(u)) pu — zdu, (6.4.2) 


2myT 7 Jz 
其 中 c = 4a2/ V3x. 
定义 
mi(z) = [F(z — z)p(z)dz, 
F(z)=| F(z + z)p(z)dz, 
再 把 上 面 两 式 中 的 五 换 成 8, 类 似 地 定义 B1 和 G2, 我 们 有 
F(x) = 三 F(wWp(z -wdu F(z)= 全 F(wplu 一 du， 
以 及 
[eaF(z) = f(Ohi(d, k=1,2, 


其 中 h(t) = h(t), h2(t) = h(--). 对 B1 和 gs 也 有 类 似 于 上 述 的 等 式 . 注意 到 当 
由 > 工时 h() = 0, 于 是 对 任意 x 和 yw 都 有 


Fi (x) — Fe(y) 





1 T e 一 itz . ~ity 
[ooh dt k=1,2; 


25x J-7 一 让 
1 e 一 it 一 eity 


人) 一 





p(t ha(t)dt, k=1,2. 
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显然 可 以 假定 
f(b) — p(t) 


T 
js t 


否则 , 则 式 (6.4.1) 自然 成 立 . 此 时 由 Riemann-Lebesgue 引 理 ， 








dt < co， 


mm 六 了 凶 - {0 = PO, (tJe-itydt = 0. 


由 于 F(-00) = @(-eo) = 0, 故 当 大 = 1,2 时 有 及 (-oo) = Bk(00) = 0, 于 是 当 
y 一 一 00 时 ， 


Fi (2) — Br(T) = 7 


注意 到 |h(#)| < 1, 故 对 一 切 x 有 


二 三 f(t) — p(t) pO), hxlt te ?dt, 


k= 1,2. 
—it 


0 (1 a 
区 = 29| (a 


[EW -sp -ads 去 | 





及 


T 


[Pa-sa)pu-aadl< 云 三 
记 A= sup |F(z) 一 @(z)|, 我 们 有 





f(r — Bu)) p(x — udu 








<| | Fo- Spe Da 


十 人 厂 D( 人 一 Z)du 十 人 D( — 2z)du 


z+2a/T 
1 T 
所 一 
2 J 


/0 (1- Mar af -fear). 


注意 到 7 = 尼 * p(w)du, 由 式 (6.4.2) 及 上 式 , 我 们 有 


f(t) 3 ) a 


C 工 一 了 
一 一人. 6.4.3 
2xYT 十 了 4 ) 


下 面 再 来 估计 F(x) - B(x) 的 下 界 . 不 难看 出 对 任意 ze 及 有 





1 
Fls) -so) < 3 三 





十 





F(z)>— = 三 _2o 和 7 F(u)p(z — wu)du 
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=5(0) + 5 ra)pte -du 


1 rz 
7 六 ea 一 更 (ou))p(Z — udu 














C 工 一 了 
> B(7) 一 ZT 7 4 
1 了 H 
元 矿 [ Ft (6.4.4) 
由 式 (6.4.3) 和 (6.4.4), 我 们 可 得 到 不 等 式 
1 了 一 2 的 全 c 1 一 7 
4< 天 三 区 -| (- 过) dit (6.4.5) 





由 7 定义 知 对 任意 a >0, 有 0<y<1 且 Jim Ya) = 1, 所 以 我 们 能 选择 充分 大 的 
o 使 1/2 < <1. 此 时 再 由 式 (6.4.5) 得 


1 T — p(t) a C 
Axg 7 |r | (-  ) dt 志 : (6.4.6) 





设 5> 1/(27) 为 任意 固定 的 实数 , 由 2rx(2y -1)2 = 1 可 定 出 x (此 时 1/2 < 7 < 
1), 在 式 (6.4.6) 中 把 c = 4a2/V2r 中 的 a 取 为 方程 2y(a) - 工 = 1/(2rg 的 解 , 即 


du 二 了 + 二 
0 T4115 


的 解 . 证 毕 . | 
注 1 引 理 6.4.1 中 的 已 可 为 非 降 有 界 函 数 , $B 可 换 为 有 界 变 差 函 数 G、 若 
下 (一 00) = G( 一 00), 则 类 似 于 引 理 有 如 下 的 结论 : 对 任意 了 > 0 和 b> 1/(2n)， 
supIF(OO-GCJIS of | Q- 下 ) dt 


+bTs G — G(z)ldy, 
oR jouer lo + Ody 


大 sin2 a 1 


其 中 g 为 G 的 Fourier 变换 , c(b) 同 引 理 6.4.1 中 的 . 


引 理 6.4.2 设 Xi,… ,Xi 为 独立 的 随机 变量 , E[Xxk] = 0, E|Xk|? < 00, 上 = 
1,.…. ,nn. 令 


ElXxl, 


Mj: 


1 
of = EIX&], -六 Ln = Ba 


be 
中 


1 
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万 ( 伯 为 Bz! 半 Xi 的 特征 函数 , 则 对 |t| < 1/(4La), 有 
k=1 


fat) — et/2| < 16Ln the /3. (6.4.7) 





证 首先 我 们 考虑 中 > Lz1 /2, 即 8Laltj? > 1. 车 能 证 明 | 包罗 | < e-2* 13, 则 


f(t) —et /| < If +e /2 < 26 < 16Lnltlse /Ss, 





设 本 (xz) 和 gn(t) 分 别 为 Xk 的 分 布 函数 和 特征 函数 , XX = Xk 一 Xi 为 Xk 的 
对 称 化 随机 变量 , 则 六 的 特征 函数 为 g(t)|? 且 EX8] = 2c2. 由 Cr- 不 等 式 得 


ElXnl? < 4(EIX#l? + EIXEN) = SEX ， 
而 由 定理 5.4.3 有 
gn(OF = 1— oRt2 + 30ult? BIXAl?, ex| <1. 
由 于 对 任意 x ER 恨 , 有 1 二 x <e”, 故 
lgr (DP <1—o2t + SltPELXal 
< exp {ie 十 Si Elxap | ， 


因此 当 |t| < 17(4n) 时 ， 


n 


[fn 一 II 


上 
gk B, 
k=1 


2 
< exp {-# 十 3 < exp 人 | , (6.4.8) 


2 








即 当 La/2 < 和 << 1/(4L%) 时 引 理 成 立 . 
现 假设 上 < La /2 且 | 上 <1/(4Ln). 对 k=1,.…,n, 有 


Ok i| 3\1/3 1/3 1 
—|t| < — (EX L-*|t| < =, 6.4.9 
ge < BL (Exiel) < Ll < 3 (6.4.9) 


gk (去 ) =1— Px, 
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oh 的 
_ ot t 3 
Br = Dy + OB Xs On| <1. 
但 由 式 (6.4.9)， 
212 
of? 1 1 1 jt s ls 1.1 
Ck” L, < 二 .二 一 一 ， 
582 < Xe < 8 “6'8 48 


故 |Br| < 1/8 十 1/48 <1/6. 而 由 Cr- 不 等 式 有 


Bal<2 (EE) + (ep) < et 


由 函数 In(1 + z) 的 吉 级 数 展开 式 易 知 1In(1 十 z) = z 十 9z?, 其 中 9| < 1 及 |z| < 1/2， 
所 以 


t t 
1 a “二 四 Ex [Ox| < 1 


Bn 2B2 2B3 
In fa(t) = + ol L,, ol <1. 
注意 到 对 任意 复数 z 有 不 等 式 


le:—1i|< |z| elzl， 


由 此 及 不 等 式 Lnlt? < 1/8 得 到 exp{]t3Ln/2} <2, 因此 
ep15 alt】 -| 
< 党 中 op{- 生 + 党 


< Laltlse—* /2. (6.4.10) 


由 式 (6.4.8) 和 (6.4.10) 知 本 引 理 成 立 . 


定理 6.4.1 设 Xi ,Xn 为 独立 的 随机 变量 , E[IXk] = 0, EI[Xkl? < co = 
1 ,n, 其 他 记号 同 引 理 6.4.2, 则 


户 四 一 ee 人 | < etn 





sup|Fn (x) — $(7)| < AL,, (6.4.11) 
ZE 了 
其 中 已 为 B-! 六 X; 的 分 布 函数 , 4 是 与 n 无 关 的 常数 . 
天 一 工 
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证 在 引 理 6.4.1 中 取 5=1/7,T 一 1/(4L,), 则 


1 
> 一 区 一 
sup |Fn(z) Br)| < A iucvary 





fnlt) | p(t) | dt 十 AiL 
t 和 


其 中 hi1 为 与 n 无 关 的 常数 , 再 由 引 理 6.4.2 即 得 本 定理 . 
不 等 式 (6.4.11) 称 为 Esseen 不 等 式 . 在 同 分 布 情 况 下 , 有 


定理 6.4.2(Berry-Esseen 不 等 式 ) 设 Xi,.…… ,Xn 为 iid 的 随机 变量 , E[X1] = 
0, E[X?] = c2 > 0, EIXil? < oo p = EIX1l/o3, 则 


P 全 于 < — G(r) 


其 中 4 是 与 无 关 的 常数 . 


在 没有 关于 随机 变量 分 布 的 补充 假定 下 , 式 (6.4.11) 和 (6.4.12) 的 阶 已 不 可 
改进 .为 此 设 Xi , Xn 为 iid 随机 变量 , 且 P(X1 = 土 1) = 1/2, 则 E[Xi] = 0， 
E[X?] = 1, EIXia3 = 1. 由 Stirling 公式 ， 


"9- 品目" 遍 


其 中 为 偶数 , 因此 (x) = P(m-1/2 二 Xk 入 z) 在 点 x = 0 处 的 跳跃 度 为 


2(2xn)-1/2(1 十 o(1)). 由 此 可 知 ， 在 点 z 二 0 的 邻 域 中 , 五,(z) 与 任意 一 个 连续 函数 
的 接近 程度 都 不 可 能 小 于 (2rm)-12(1+o(1)), 因而 式 (6.4.12) 中 的 常数 4 > 1/V2r. 


sup 
rER 


(6.4.12) 








6.4.2 用 Stein 方法 来 估计 正 态 逼 近 的 收敛 速度 


上 面 我 们 用 特征 函数 这 一 工具 对 正 态 逼 近 的 速度 作 了 估计 , 近年 来 又 发 展 了 
另 一 种 不 用 特征 函数 的 估计 方法 , 并 受到 了 极 大 的 重视 , 特别 在 随机 图 论 中 得 到 了 
很 好 的 应 用 . 在 本 节 中 , 我 们 对 这 一 方法 作 一 简要 的 介绍 
令 
F = {f : f 连续 且 逐 段 连 续 可 微 , EIf'(N)| < co}， 
其 中 N 为 标准 正 态 随 机 变量 . 以 下 设 9(z) 为 N(0,1) 的 概率 密度 , 记 


= 太志 加 全 }e= 六 7oseldz 
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引 理 6.4.3 实 随 机 变量 X 具有 标准 正 态 分 布 6 的 充分 必要 条 件 为 对 每 个 
六 < 史 ， 
E[LF Xi = EI[XfA(X). (6.4.13) 


证 必要 性 设 和 ~ N(0,1), VIP < oo, 则 
EF'(X)= 人 eslc)dz 
i AGRE EAGLE A EAGLE 


=[ 少 (3 ol f'(x)dz — 三 多 (zjdz 所 (zjdz 


= ja)dz- 六 waU() -Fo)dz 
= [$2)(f(0) — Ha)dz 
= /26(2)f(2)dz = ELXF(X)), 


其 中 最 后 第 二 等 号 成 立 是 由 于 9(z) = 一 z@(z) 以 及 ,zp(z)dz = 0. 
充分 性 设 式 (6.4.13) 成 立 , 取 hy,(7z) = J(_o0,zol (7X)， 


fro (7) = 7 三 — Nhs, jglauydao， (6.4.14) 
两 边 乘 以 $(x) 再 对 x 求 导 得 fi 满足 微分 方程 
fo (7) — zfro (7) = hzo(z) — Nhszo. (6.4.15) 
在 式 (6.4.15) 中 以 随机 变量 X 替代 x, 然后 两 边 取 期 望 , 并 注意 到 式 (6.4.13) 及 
Nhso = [~ (2)dz = B20), 


我 们 有 0=E [F(X) Xfro(X)| 一 Elhzo(X) 一 下 (zo) = 一 P(X < Z0) 一 G(x0), 故 
X ~ N(0,1). I 


对 任意 两 个 Borel 集合 BB 和 B', 设 久 和 XX’ 满足 如 下 条 件 ， 
P(X €B,X’eB)=P(X eB',xX’eB), 
则 称 X 和 X' 是 可 交换 的 随机 变量 . 显然 由 定义 知 基 和 X' 同 分 布 . 
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引 理 6.4.4 设 X 和 X' 为 一 对 可 交换 的 随机 变量 , 满足 E[X?] < co, 及 存在 入， 
0< 入 <1, 使 
EX[X] AE EX|X) = (1— NX. (6.4.16) 


设 f 为 RR 上 分 段 连 续 函 数 , 且 存 在 常数 c>0 使 
|f(z)| < cll1+|z), vzeR, 


则 
BX/(X) -BX XX) -OO =0. 


证 由 于 和 X’ 是 一 对 可 交换 的 随机 变量 , 故 对 任意 一 个 Borel 可 测 函 数 
9(7x,y), Elg(X, X)| < oo0, 有 


Elg(X, X')] = Elg(X’, X)). 
车 g (zx,Y) 是 反对 称 函 数 ， 即 9g(yz) 一 一 9(z,y)， VYZ;V € R, 则 
Elg(X, X")] 一 —E[lg(X’,X) = —Elg(X, X)]， 
从 而 Elg(X, X= 0. 由 于 (y 一 3)(J(y) 十 f(z)) 为 反对 称 函 数 , 故 
0=E[(X’— X)(f(X) + f(X")) 

= BE[X’— X22f(X)+ FX) — FX))] 

=2E{(E*[X]— X)f(X)} + E[((X’— X)(f(X') — f(X)) 

= 2 和 AE[Xf(X)] + EL((X’ — XfFX") — F(X)). 
移 项 即 得 . 

记 hzo (7) = To0,z0](2), 则 
Nhso = [haolw) plw)dw = [Glw)dw = Bro). 


考虑 微分 方程 
广 (z) -zj(z) = hao(z) — B(xo). 
用 随机 变量 XX 替代 z, 然后 两 边 取 期 望 值得 


Elf'(X)— Xf(X)] = P(X < zo) — B(x0), (6.4.17) 
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即 随机 变量 X 的 分 布 函数 和 5 的 误差 可 以 通过 户 (X) 一 XXZX) 的 期 望 来 估计 . 这 
是 Stein 方法 的 出 发 点 . 更 一 般 地 , 我 们 可 以 把 hs 推广 为 有 RR 上 的 分 段 连续 函数 
h(x), 其 中 满足 : 存在 常数 c 使 |h(z)| < c(L+z2),， 则 


f(z) — zf (x) =h(z) — Nh (6.4.18) 
有 特 解 
fo) = 5 -Necodu 
= -3 fo Catw) — Nh)g(w)dow. (6.4.19) 
后 一 等 式 是 由 于 


[lw) — Nh)$(w)dw 
= [ww -Ng(wjdu — 和 oo) — Nh)o(w)dw 
= 一 三 wow) — NA)O(w)dw. 
由 此 不 难 推出 f(x) 满足 
fla) < Ve + al). (6.4.20) 
为 了 估计 E[h(X)] 一 Nh, 我们 必须 对 EI[f'(X) 一 XJ(X)] 进行 估计 . 
引 理 6.4.5 设 h 是 恨 上 的 有 界 绝对 连续 函数 , 了 由 式 (6.4.19) 定义 , 则 


Tt 


sup |f (x)| < /= sup|h(x) — Nh), (6.4.21) 
rER 2 zeR 
sup|f’(z)| < 2 sup|h(z) — Nhl, (6.4.22) 
reER ZE 职 
sup|f” (x)| < 2 sup| 产 (z)|. (6.4.23) 
YE 区 ZER 


证 由 式 (6.4.19) 知 , 当 z < 0 时 ， 


1 Zz 
HS — Nhl Tes | wa $0) dw 


$7) 
gz) 





< sup |A(z) — NA|: (6.4.24) 
zg0 
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当 z>0 时 同样 可 得 
一 到 (2) 





lo) < sp — NA 13 (6.4.25) 
又 当 z > 0 时 ， 1 ga) 
tw2 由 
1 一 sz) < i we /2dw = 一 一 ， 


即 x(1 一 B(x))/9(z) < 1. 同 理 , 当 z<0 时 ,|zls(z)/g(z) <1. 故 


G(T)N ZG(Z) 人 . 
(0) 1+ > vet 


d /1- &(z) rz(1 一 更 (Z)) 
a i) ) lt ga) < ?>0 


由 此 知 函 数 $B(z)/$(z) 和 (1 一 (z))/@(z) 都 是 在 z = 0 点 达到 其 最 大 值 , 代入 式 
(6.4.24) 和 (6.4.25) 即 得 式 (6.4.21). 
再 证 不 等 式 (6.4.22). 由 式 (6.4.18) 和 (6.4.19), 当 z > 0 时 ， 

















=h(z)— Nh— -2 三 (wm ~ NA)G(w) dw, 
故 由 z(1 一 B(x))/9(x) 入 1 得 
sup |f (a) < supJh(o) 一 AN (1+ sup 3 [ola ) 
< 2 sup|h(z) — Nhl. 
人 全民 


类 似 处 理 zx < 0 情形 . 
最 后 证 明 式 (6.4.23). 由 式 (6.4.18)， 
f° (x) = (zf(z) + h(x) — Nh) 
= f(z) + zr(zf(r) + h(r) — Nh) + h(z) 
= (1+z2)Fz) + rh(z) — Nh) + h(z). (6.4.26) 


注意 到 


Nh= | (nh(2) ~ hly)o(wady = {ody fo lw)d 
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= way fo wwaw — fo Way fo Ww)dw 
= wwaw ff oa- rw)aw 三 wdy 
= = 7 人 oo)@(ujdao — 三 Rw) (1 — B(w))dw, 


= ff esaw — fF W)C -Glw)aw] sjdz 
= [(f wns)aw — flw) Blw)de) 
一 三 p(w)(1 — Blw))dw + 上 ~ p(w) ee 
= WG)B() (Gz) - Blw)dw = [Kw) 1 ~ Bl) Br)dw 
- I 1(w)B(w) (1 — Bw)) dw 


=- 三 n， G -so) 一 8(z) f° Kw)(1 ~ Glew)) dw 
把 上 式 代入 式 (6.4.26), 得 
a / (1 + 22)(1 一 于 (2)) 2 7 
jz) = 1 (7)+ ( 一 0 [_ 1 (w)B(w) dw 


- (s+ | (Lt+ ro )B(7) 2 ) [ww ao)au 


当 z <0 时, 由 |z|B(x)/9(z) <1 可 推 知 对 一 切 ze RR， 
(1 + 22)8(7) 
(1) 

同 理 当 x > 0 时 , z(1 一 B(x))/9(x) < 1 推 知 对 一 切 ze RR， 


A Q +z)0 -$7)) 、 
92(0) + $(z) 


9g1i(z) 全 了 十 > 0; 





从 而 
sup|f” (7)| < sup|h’(z)|: |1+ sup {92(2)(x$(7x) 十 gz)) 
TER rE 有 R ZE 了 
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—g1(2)(z(1 — B(z)) — (7))} | 
= 2 supl|h’(z)|. 
ZER 
引 理 得 证 . 
引 理 6.4.6 设 (X,X') 为 一 对 可 交换 的 随机 变量 , 使 得 

EX[X1=(1- NX, 0<A<l1. 
设 凡 为 民 上 的 有 和 界 连 续 函 数 且 有 有 限 分 段 连 续 的 导 函 数 有 ,对 这 个 ,由 式 (6.4.19) 
定义 f, 则 


EIA(X)] ~ Nh=E 17oo (4 一 EX(X’ 一 x))| (6.4.27) 





+ ~ E {x 一 X) ( - 立 5 和 ) [Tygx’} — Tygx}| } f" (ydy. 
证 首先 注意 到 
B|7o0 -去 CC -OUCO -VCO) 
=E{f(X) [1 一 云 EX(X'— X)?]} 
- 南 E{CK -GOOD SK) XXX)}. 6.428) 
当 XX < X' 时 , 由 Taylor 展开 积分 余 项 表示 , 有 
HX) TR) KFR = WD) -oay 
同 理 , 当 和 > X’ 时 , 有 
FX) -FX FR) = fo WY XN)ay. 
因此 
F(X) -FX -XR = OX 9 [ex - Tyexy] f(y)qy. 
由 (X, XX 人 为 一 对 可 交换 的 随机 变量 , 知 


-BE{X XX) FX) XXX) 
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= -去 [EB{X XUX —Y) [Tyexy Ts] Pdy 
= {XK [ewer Toe)} dy 
把 上 面 两 个 等 式 相 加 再 除 以 2 即 得 式 (6.4.27) 的 后 半 部 分 . 又 根据 引 理 6.4.4， 
EIXf(X) = EX - OUCC -1X 
把 此 式 代 入 式 (6.4.28) 即 得 
Breo -去 -OUOO -TOO) 
= ELF(X) — Xf(X)] = EIh(X) — NA 
引 理 得 证 . I 
现在 可 以 叙述 我 们 的 主要 定理 了 . 
定理 6.4.3(Stein) 在 引 理 6.4.6 的 假定 下 , 有 


1/2 
IE[A(X) — Nh| < 2 sup |P(z) — Nh|. G LE 一 EX(X’ 一 zx ) 


十 让 名 sup pu (z)| .也 |X — X|3, (6.4.29) 
且 对 所 有 的 z e RR， 
2\ 1/2 
IP(X < 2)— G(r)| <2 ( LE 一 二 EX(X' - xX) 
+ (2m)- /4 (3 ElX’— xp) . (6.4.30) 


证 记 f(z) 是 由 式 (6.4.19) 定义 , 则 由 引 理 6.4.5， 
sup|f’(z)| < 2 sup|h(z) — Nh), 
rER TER 
sup|f”(z)| < 2 sup|h (zx)|. 

TER 全 网 
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由 引 理 6.4.6 及 上 面 两 式 得 


IE[RCX — Nh| < E 





170 (1 去 E(x" -Xx)) 








1 | fs 站 十 其/ ， 

+ 下 | 半 foc- 国 4- 2 ) Desm -Tue } (Way 

< 2 suplh(z) — Nh|:Ell— LEX(X' — X)? 
TER 2 和 


十 sp 人 也 [有 Ce -XX) ( | 








AX 
2\ 1/2 
1 hx/y 2 
<2suplh(r)— Nhl: [Ell1— aE (X’—X) 
TER 2 和 


1 
十 二 sup|h’(z)|- EIX’— X|. 
4A xzER 











下 面 证 明 式 (6.4.30), 如 图 6.1, 取 定 A > 0, 定义 


rTXo 
hzo,A(T) = $4 0, TXo 二 + 
1— (x— zo)/A, To<r<Zzo+tA, 


则 
hzo_A,A(T) & Trgro} < hzoA(zZ)， 


显然 , sup |hzo,a 一 Nhzo,a| 所 1 及 sup|h’,al 所 1/4, 故 由 式 (6.4.29)， 
ZTER rER 


P(X < 20) < El[lhzo,a(X)] 
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1/2 
1 2 
< Nhy 21EI1——EX(X’— XxX)? / 3. 
S o4 十 | 2 和 ( xX) ) + + EX - X| 


由 于 Nhzo, A < NIlzgzotA} = G(ro 十 A) < G(xo) 十 A/V2n, 故 


P(X < 6 <_4 21El1l 1 Ex(x ,x 


/ 3 
+ EX - XB. 


A 
EIX’ 3 = min. 
-局 + 访 | | = min 





于 是 可 得 到 式 (6.4.30) 右边 的 表达 式 . 同 理 , 利用 


A 
Nhzo,A 之 NIlzgzo—A} 二 G(xo 一 A) 之 G(x0) 一 vv 过 


及 式 (6.4.29) 可 以 证 明 绝 对 值得 另 一 半 . 两 者 结合 即 得 式 (6.4.30). I 
推论 6.4.1 设 XX,… ,Xn 为 独立 的 随机 变量 , 满足 E[X#] = 0, ELIX2] = oz > 0， 


nn 以 及 =1 记 W = Xk, 则 
天 一 1 天 一 1 


1/2 
IP(W < z) 一 “EY™ XA -9] 


k=1 


n 1/2 
1/4 we (2 ElXl|? + 303) 让 . 
k=1 


EXr(X! — Xi)? = o2 + X2, 
EIX% ~ Xkl? = 2 (EIXk|? + 302E|XE|) 
2 (EIXke|3 + 30%). 





设 随 机 变量 J 与 Xi,… ,Xn 独立 , 且 P(J = 让 =1/n,i=1,.…,n, 令 


= > Xk+ XI— Xi = W+X)—X), 
k=1 
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则 太 与 环 ' 可 交换 , 且 
EWW’= W +EX’— XW] =W—-W -= (1-3)w 
在 定理 6.4.3 中 取 入 = 1/n, 则 
E 1 国 7 EW(W’ 一 四) 中 = 已 1 国 7 EW(X’ 国 x . (6.4.32) 
注意 到 由 W 生成 的 o 代数 oc(W) Co(X1,… ,Xn) 全 ol(X), 故 
E[EwY] =B{EY [EX*Y]} <E{E” [ExY = 了 [ExY] 


把 上 面 不 等 式 代 入 式 (6.4.32), 有 


1 Ty 
EW’— WP=EX X=» EX — XB 
Ww Wh = BX Xl = Xt 


2 nn 
二 2 (E|Xxl? + 30¢). 
~ 二 1] 


把 以 上 两 式 代 入 定理 6.4.3 的 式 (6.4.30) 即 得 . 
注 2 车 妨 ,… ,Yh 为 iid 随机 变量 , E[Y] = 0, EI[Y2] =1,W =n-1/2 Yi 
k=1 
在 推论 6.4.1 中 取 Xk = /Vn, Bs = 也 页? Ba = 了 YA, 则 
(Bs — 1) (263 +6)'2 
IP(W < xz) — $(z)| < 万 十 i 
由 上 知 , 在 4 阶 矩 存在 的 条 件 下 , 正 态 逼近 速度 的 估计 为 O(n-!/4), 比 Berry-Esseen 
估计 要 差 . E. Bolthausen 改进 了 上 述 的 结果 , 得 到 O(n-!22) 的 阶 , 即 与 用 经 典 特 征 
函数 方法 所 得 到 的 结果 相当 . 
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以 下 设 Xi ,Xn 为 iid 随机 变量 , ELX1] = 0, EX 人 = 1 了 Xi = 7, 令 
(NT)={ 人 和 = Xi , Xn): EL = 0,ELXI] = 1, EX = 7} 


大 
Sk 一 TI2 》 k=1,...,n. 


j=1 
设 hs,a 仍 由 式 (6.4.31) 定义 , 记 
6(A,7y,n) = sup {[Elhz,a(Sn)] — Nhz,a|: z € R, X € Zn,y))}, 
6(7,n) = 6(0, 7,n). 
要 证 明 Berry-Esseen 定理 , 只 要 证 明 
sup {到 6(%,n): Y>1, ne | < 十 co. (6.4.33) 
由 于 hzo < hz,a < hzyA0; 如 同 定理 6.4.3 所 讨论 的 一 样 , 我 们 有 
6(y,n) < (A,Y,n)+ 坊 (6.4.34) 
对 上 述 的 hs a, 由 式 (6.4.18) 和 (6.4.19) 定义 f(z), 根据 引 理 6.4.5 有 
fo <2, zj 和 1 ol 和 2， 
因此 对 上 述 的 f, 由 式 (6.4.18)， 
|f (z+ Fr) = yf +t + zfs t+) — Fz) + h(z +y) — Ah(z)| 
< lyl @€ 十 2z| 十 二 放 Tz,z+A] (T+ wat) . (6.4.35) 
注意 到 E[Xnf(Sn1)] = 0, PLXaf(Sn-1)] = Elf(S%-1)] 及 
E[f"(S,) — Saf (Sn)] = Elf'(S,) — VnXnf (Ss,)| 
=E[Lf'(S,) — f (Sn-1)] 
_E bs | ( fF (s- 十 2 - f(sn-1) ) dl . (6.4.36) 
由 式 (6.4.35)， 
Elf'(Sn) — f'(Sn-1) 
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<B{ 攻 (2+28.- 4+ 工 | Tszta) (s- + 


在 给 定 X 的 条 件 下 ， 
Xn| 1 tXn, | 
EX" | 呈 二 Tz, z 十 A] (s 一 2 dt 


tX 
一 n— < Al Xn dt 
hr Co 1 十 万 之 十 | ) 














tXn 
JP (:- 字 = < 9 -1 全 ZZ 十 Vn ) 1 



























< 局 f(s 人 人) -ea(- 人 全) 250n-D)d 
< (+0) 
-0 (En js 

再 对 Xn 取 期 望 得 





[让 wa 人 PE 


其 中 e 是 与 无 关 的 常数 , 在 不 同 的 场合 可 代表 不 同 的 常数 . 又 
B | (+2 中 | < < 蕊 [1+ (Els， 1| 2) | < 所 
因此 ; 
fs) -fs Dl< 二 (1+ Oe) 
再 由 式 (6.4.35)， 


af 人 二 -| 
<E | > (2 十 2|S。1| 十 二 人 Iisata) (s, + we) d]| 


< 区 (1 十 2 . (6.4.37) 


E 
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由 式 (6.4.34) 和 (6.4.37), 得 


Cl 了 6(7) 7 一 1 A 
6(Y,n) < 二 @ 十 | ) 十 J (6.4.38) 





取 A 和 A= 2c1Y/ Vn, 得 


C 1 
50m < A + 565(Y,n—1) 


k 
1 1 
< andy nk-l)teyy 二 一 一. 
Dk+1 坪 27V 亿 一 了 
当 邑 一 8 一 1=1 时 ,6(y, 1) 乏 1. 又 由 于 yy> 关 1 故 


Yn) < 5 


引 


6.5 强大 数 定律 


在 6.2 节 中 , 我 们 讨论 了 Suy/mn 一 , 0 的 条 件 , 本 节 将 进一步 讨论 在 什么 条 件 下 
有 Su。/m 一 > 0, a.s.. 这 是 比 5%/n ,0 更 强 的 一 个 结论 . 为 此 我 们 需要 一 些 有 关 
的 知识 和 不 等 式 . 

设 {Xn,n > 1} 为 概率 空间 (Q, oz,P) 上 的 一 列 随 机 变量 , 记 cc( Xi ,XX,) 为 
由 随机 变量 Xi,… ,XX 生成 的 子 o 代数 , 以 有 = a(Xn, Xn41i,…) 表示 由 随机 变 
量 {Xn, X41,…} 生成 的 子 c 代数 , n > 1. 由 定义 , 久 , 由 代数 


k 
Cn = {Us : Anri EoXn,:': ,Xnti), i < kke "| 
i=0 
所 生成 . 显然 仿 随 着 n 的 增加 而 越 来 越 粗 , 即 9 2 2 D2…, 记 
= 门 ,, 
n=1 


称 9 是 随机 变量 序列 {X%} 的 尾 o 代数 , 9 中 的 事件 称 为 尾 事件 , 而 任 一 0 上 关 
于 9 可 测 的 函数 称 为 尾 函 数 . 直观 上 , 一 个 尾 函数 不 依赖 于 随机 变量 序列 的 任意 
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有 限 多 个 随机 变量 , 即 它 的 取 值 与 有 限 个 随机 变量 的 取 值 无 关 . 类 似 地 , 一 个 尾 事 
件 也 不 随 有 限 个 随机 变量 的 变化 而 变化 . 例如 ， 


2， limsup Xn, linf 3 Dx Himeup > 
天 一 1 k=1 
等 , 都 是 尾 函数 . 这 些 序列 的 收敛 点 集 以 及 级 数 并 X,, 的 收敛 点 集 都 是 尾 事件 . 当 
(cs} 为 独立 随机 变量 序列 时 , 我 们 有 著名 的 Kolmogorov 0-1 律 

引 理 6.5.1 车 {X} 为 独立 随机 变量 序列 , 则 尾 事件 的 概率 非 0 即 1, 而 尾 函 
数 几乎 处 处 是 个 常数 , 即 若 Y 关于 F 可 测 , 则 了 = 6 as. 

证 设 儿 为 {X} 的 尾 o 代数 . 由 {Xs} 的 独立 性 知 o(X1)… ;Xi) 与 Fu 
独立 . 由 于 FC Zu 故 对 任意 m > 1,0(XI,… ,Xn) 与 9 独立 . 注意 到 久 是 
由 代数 {UU 4; : hi € o(X1,… ,Xi),i < nn e N} 生成 , 故 由 独立 性 判别 准则 知 
or( 了 > 了 一 员 与 乡 独 立 注意 到 Cc 久 , 取 AeE ,有 P(4) = P(A)P(4), 
故 P(4)=0 或 1. 

最 后 , 若 Y 是 一 个 尾 函数 , 则 对 每 个 ye R, {Y < y} 是 尾 事件 , 故 P(Y < vy) 等 
于 0 或 1, 从 而 知 Y 几乎 处 处 是 一 常数 . I 

由 0-1 律 我 们 有 如 下 结果 : 

推论 6.5.1 若 {X} 为 独立 随机 变量 序列 , 则 

(1) X 或 几乎 处 处 收敛 于 一 有 限 极限 或 几乎 处 处 发 散 ; 

(2) 于 和 或 几乎 处 处 收 你 于 一 有 限 极限 或 几乎 处 处 发 艇 


(3) 车 bs 十 o0, 则 如 1 SX 或 几乎 处 处 收敛 于 一 有 限 极 限 或 几乎 处 处 发 散 ， 


引 理 6.5.2(Kolmogorov 不 等 式 ) 设 {X} 为 独立 随机 变量 序列 ， Var(Xn) 
二 02,0<o2 < oo, 设 |X%| < clc 有 限 或 无 穷 ), 则 对 每 个 e > 0, 有 
_ (e+2c)? 


> ok 
k=1 


1 eC， 
1 <P (8 157 — ES’;| > <) < 豆 2 人 {6.5.1) 
J . 
其 中 9 = 》 Xx, j= 1,.… ,Nn. 
k=1 


证 ”我们 仅 证 明 式 (6.5.1) 的 左 端 不 等 式 , 因为 其 右 端 不 等 式 即 为 推论 4.5.1. 
不 失 一 般 性 , 可 设 E[Xk] = 0, 有 == 1,…,n, 并 把 |Xn| 和 ec 改 为 |Xn| < 2c (此 因 
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In 一 E[Xn]| < 2c). 为 证 左边 不 等 式 , 设 50 = 0, 车 c = co, 则 左边 不 等 式 显然 成 
立 , 故 下 面 设 c < oo, 记 


= 中 > 中 
1&i&n 


={|51|> 0}, Bi = {915 < olsel> | hn 


则 Bi1,::…. ,Bn 两 两 不 交 ， 且 4， = 入 Br. 在 事件 Br 上 ， 有 [Sx| < [Sk-1| 十 [Xl < 
天 一 1 
e 十 2c, 于 是 


nn 


E[S214,] = >, ELS21p,] = >》 EISRIp,] + > El(S, — Sk)?IB,] 
二 天 一 1 k=1 


< (c+ 20) 3 P(Bi) + > E(Sn 一 Se)2?P(Br) 


k=1 二 1 


k 
< [ 十 2c)2 十 yo y PUB 


k=1 k=1 


一 bk 十 2c)2 十 > 中 P(A,), (6.5.2) 


k=1 





其 中 利用 了 ELS。- Sk)? < E[S2] = i . 另 一 方面 ， 


E[S214,] = ELS3 — ELS214s] > E[S3] ~ czP(45) 





一 》， o2 一 c2 十 czP(4。)， (6.5.3) 
无 一 1 
结合 式 (6.5.2) 和 (6.5.3) 得 
忆 2 _ -2 
P(An) > a 1_ (+0 
(e+2c)2+ 》 cg 一 62 > ar 
k=1 ££ 二 1 

从 而 证 得 式 (6.5.1) 的 左 端 不 等 式 . I 


定理 6.5.1 设 {Xn} 为 独立 的 随机 变量 序列 , Var(Xn) = 02 < oo0,n 之 1. 若 
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半 肥 < oo, 则 志 Cn -BEXn]) 几乎 处 处 收 全 ;反之 , 若 存 在 有 限 常数 c, 对 一 切 n 


有 |Xn| < c, as., 则 由 级 数 x 一 局 [Xa]) 的 几乎 处 处 收敛 可 推 知 二 aa < oo 
证 记 人 下 = 95 一 ELS], 由 Kolmogorov 不 等 式 右 半 部 分 , 对 ve > 0, 有 


1 2 1 2 
p (se [Tk Tl > 9 < 三 》 < 证 
因为 
OO 
P (0 [Thnk 一 了 7P| > 9 一 ,im P (sg | 了 TAR 一 Ta > = 


k=1 
oo 
1 2 
< & >》, Ok 一 0， 
二 n+1 


所 以 由 定理 2.7.2 即 得 本 定理 的 前 半 部 分 . 由 Kolmogorov 不 等 式 的 左 半 部 分 , 对 每 
个 n, 有 


k=1 


? (Ur -nl>) = 一 im ,7 (me, Tare Tal >e) 


过 lim 1_ 《人 +29- -1_ +29 
的 > 2 2 of 
k=1 k=n+l1 
如 果 六 o2 = oo, 则 对 每 个 n>1, 有 
n=1 
P 四 17 一 了 | > = 1 
k=1 
从 而 推出 罗 几乎 处 处 发 散 , 与 所 给 条 件 矛 盾 ; 本 定理 得 证 . 
注 1 由 定理 6.5.1, 当 XX 一 致 有 界 时 ， 级 数 2 (X 2 与 寺 吧 同时 收 


敛 或 发 散 . 
定理 6.5.2 设 {Xn} 为 独立 的 随机 变量 序列 , 且 存 在 有 限 常 数 c, 使 对 一 切 
有 之 1, |Xn| 和 cas, 则 > Xn 几乎 处 处 收敛 的 充分 必要 条 件 是 : 
n=1 
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1) 二 Epo 收敛 
2) 3 Var(Xn,) < oo. 
n=1 
证 由 定理 6.5.1 前 半 部 分 知 充分 性 成 立 . 为 证 必要 性 , 我 们 将 用 对 称 化 方法 . 


引入 随机 变量 序列 {X/}, 使 {X/} 与 {Xn} 独立 同 分 布 (由 Kolmogorov 相 容 性 定 
理 , 在 8 x 8 上 , 这样 的 随机 变量 序列 是 存在 的 ), 然后 构造 对 称 化 随机 变量 序列 
Xs =X,— XI nl 
则 {Xs,n > 1} 为 独立 随机 变量 序列 且 满足 : 对 每 个 n> 1， 
ELX#] = E[Xn] 一 EIXa] = 0， 
8 & |Xn| + |Xn| & 2c，a.s.， 
Var(Xs) = Var(Xn) + Var(X/) = 202 


n: 


由 于 芝 X 几乎 处 处 收 敏 , 所 以 实 X 也 几乎 处 处 收敛, 从 而 六 Xs 几乎 处 处 收 
n=1 n=1 n=1 
敏 . 由 定理 6.5.1 后 半 部 分 知 3 Var(Xs) < co, 因此 > az < oo. 再 由 定理 6.5.1 
也 一 上 n=1 
的 前 半 部 分 得 半 (X, 一 [Xl) 几乎 处 处 收敛 , 从 而 
=] 


Oo 


(Xn — (Xn — ELXn)) = 2X Or — ELXn]) 


[Ms 
巴 

Pd 3 
EE 

| 
Ms 


也 收敛 . | 


由 上 面 几 个 定理 可 以 得 出 著名 的 关于 独立 随机 变量 序列 几乎 处 处 收敛 的 三 
数 定 理 ， 


定理 6.5.3( 三 级 数 定理 ) 设 {Xn} 为 独立 随机 变量 序列 , 则 六 X 几乎 处 处 
收敛 的 充分 必要 条 件 是 对 某 个 常数 c > 0, 下 列 三 个 级 数 收 化 ” 

(上 D 2 P(Xnl > 9 

(2) > EX 

(3) > Var(X®). 

n 二 1 

其 中 Xs 的 定义 见 式 (6.1.1). 进一步 还 可 得 出 如 果 (1) ~ (3) 对 某 个 c > 0 成 立 , 则 
对 一 切 c > 0 都 成 立 . 
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证 ”必要 性 设 半 X。 几乎 处 处 收敛, 则 X， 一 0，as， 故 对 每 个 c > 0， 
n=1 
P(X| > c io 二 0, 由 Borel-Cantelli 引 理 得 (1) 成 立 . 由 等 价 性 引 理 6.1.3, XX 
n=1 





和 江 Xe 是 收敛 等 价 的 , 因此 由 定理 6.5.2 得 级 数 (2) 和 (3) 收敛. 
n=1 
充分 性 由 (1) 知 级 数 汪 X 和 Xe 是 收敛 等 价 的 . 由 (2) 和 (3) 的 收敛 
n=1 n=1 
性 以 及 定 6.5.2 知 Xe 几乎 处 处 收敛 , 因此 和 X 几乎 处 处 收敛 
n=1 n=1] 
如 果 (1) ~ (3) 对 某 个 ec > 0 成 立 , 由 三 级 数 定理 充分 性 知  X， 几乎 处 处 收 
n=1 
敏 , 因此 再 由 必要 性 知 对 任意 c > 0, 级 数 (1) ~ (3) 收敛 . 上 
推论 6.5.2 如 果 定 理 6.5.3 中 三 个 级 数 有 一 个 不 收敛 ,那么 YX, 几乎 处 处 
n= 二 1 
发 散 . 
证 明 是 显然 的 , 只 要 注意 到 根据 0-1 律 ，  X, 不 是 几乎 处 处 收敛 就 必然 几乎 
n 二 1 
处 处 发 散 . 


为 了 得 到 强大 数 定律 成 立 的 一 个 较 易 验 证 的 充分 条 件 , 我 们 需要 以 下 两 个 
引 理 . 


引 理 6.5.3(Toeplitz 引 理 ) 设 {a} 为 实数 序列 ， 且 an 一 a, 则 
1 nn 
二 >》 ak 一 > ga. 
| 


引 理 6.5.4(Kronecker 引 理 ) 设 {aw} 和 {zw} 为 两 个 实数 序列 , 0 < on T oo， 
且 》 xn/an 收敛 于 有 限 实数 , 则 azl 5 zx 一 0. 
n=1 k=1 


证 令 s=0s = zk/axr, nn 之 1, 则 


k=1 


Tn nn n—l1 
1 1 1 
元 >》 ao = 元 >》 vak(sk 一 sk-1) 一 sn 一 元 》 (apHl 一 ak)sk. 
k=1 k=1 k=1 
注意 到 sn 一 s € 民 , 知 对 任意 e > 0, 存在 no0, 当 n>no 时 |s, 一 s|<e 于 是 


1 所: a 
1 
-| 》 (ak41 ak)(sk — 8) Ss 
Qn £1 


On 








1 nl 
一 》 (ak+i QK)Ss 一 3 
On =1 
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no—1 
1 "2 





Qn—a 
< | 一 》 (ak 一 QK)(sSK s) 十 一 D0¢ 并 |g 》 € 
Qn £1 Qn Qn 
由 此 知 
1 也 一 
元 》 (asrl 一 ap)sk 一 ，s， 
k=1 
nh 
因而 ozl 》 zx — 0. IE 
k=1 


定理 6.5.4 设 {Xn} 为 独立 随机 变量 序列 ,Var(Xn) = 02 < com > 1 车 
02/r2 < o0; 则 nl 5 (Xk 一 E[X#kl) 几乎 处 处 收 伍 于 0. 
k=1 


n= 二 1 
证 令 二 = (Xn 一 ELXnl)/n, 则 EE] = 0, Var(7%) = 02/n?2, n 之 1， 由 定理 
6.5.1 及 Kronecker 引 理 即 得 . I 
当 {Xn} 为 iid 情形 时 , 我 们 有 更 强 的 结果 . 
定理 6.5.5(Kolmogorov) 设 {Xn} 为 独立 同 分 布 随 机 变量 序列 , 则 5;, yn 几乎 
处 处 收敛 于 一 有 限 极限 m 的 充分 必要 条 件 是 EIX1| < co, 此 时 m= E[Xi]. 
证 ”我们 要 用 到 一 个 熟知 的 不 等 式 : 对 任 一 随机 变量 X (了 EIXI < o 或 等 于 
十 co), 有 


SPX >n) < ElX|< 1+ PXI > n). (6.5.4) 
如 一 | n=1 


必要 性 着 S55/n 一 > m, me 及, 则 


Xn Sn, nO—1l Sn_1 
Nn n Nn 多 一 工 


因此 由 Borel-Cantelli 引 理 及 同 分 布 性 质 得 








> 0， 3.S.， 


OO 


》 P( > 由 = > P(X > n) < +eo. 


n=1 


由 式 (6.5.4) 知 E[X1| 存在 有 限 . 
充分 性 设 Xi| < o0, 令 二 一 XTx,jcny; 5 = 党 珠 . 由 式 (6.5.4) 知 
无 一 1 


》 P(Xs|> 败 = HPIX Zn) < EX < oo， 


n=1 n=1 
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故 由 等 价 性 引 理 知 ，Sn/jm 与 5S%/n 收敛 等 价 . 因此 只 要 证 明 5S,/n 一 E[Xi| 

即 可 . 注意 到 由 控制 收敛 定理 , 有 
E[lYn] = ElXn Hl xl<n}] = 


由 Teoplitz 引 理 知 B[5%]/n 一 > m, 所 以 只 要 证 明 


ElXiTxil<n}] — m, 


再 由 定理 6.5.4, 我 们 仅 要 证 明 Var(Y)/n? < oo 即 可 . 事实 上 
亿 一 工 


0 le 
[ = 2 7 2 DIX? Hr 1<Ix nk)] 
k=1 


RP(k—1<|IX|<A) 


Fl < 月 入 二 





[Ms 
3 
S 
~ 


~ Var(Y,) 


2 





如 
中 
广 


人 

WE 

,~ 
4: 


(6.5.5) 


3 
Il 
四 


= KP(k-1< 
k=1 n=k 
对 kk 之 1， 
1 dr 1 1 2 
二 < 应 + 放 吕 - 疡 th 
把 此 式 代入 式 (6.5.5) 得 
—1<|Xi|<k) 


P(Xi| > ) < 2(1 + EIXi|) 
外 


k=1 


从 而 充分 性 得 证 . 
注 2 Kolmogorovy 强大 数 定律 的 证 明 是 富有 技巧 性 的 , 这 里 不 能 用 三 级 数 定理 
加 Kronecker 引 理 来 证 明 , 原因 是 {Yi,/n} 截 尾 均值 级 数 不 必 收 敛 . 
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6.6 重 对 数 律 


设 {X} 是 独立 随机 变量 序列 , 5S 为 前 项 部 分 和 . 本 节 研 究 部 分 和 序列 的 
增长 速度 问题 . 如 果 {X%} 为 iid 且 E[X1] = 0, 则 由 Kolomogorov 强大 数 定律 知 
Sn/n = 0(1), as., 即 5% 的 增长 速度 小 于 n. 如 果 进 一 步 假 定 E[X?] = o? < oo, 则 
由 中 心 极限 定理 可 以 证 明 

oti 一 o(1)，a.s.， 
其 中 5 > 0, 因此 知道 S。 的 增长 速度 在 nl/2 与 nn 之 间 . 重 对 数 律 就 是 要 找 出 5 
增长 速度 的 精确 阶 . 下 面 我 们 将 对 iid 随机 变量 序列 证 明 
， Sn _ 
lim sup VE 一 O， 
由 于 上 式 确切 地 指出 了 55 的 几乎 处 处 上 界 ， 因此 证 明 的 技巧 性 较 高 , 计算 也 较 细 
致 . 为 得 出 上 述 结果 , 我 们 需要 如 下 一 些 结果 . 为 方便 起 见 , 记 


LLn = log logn, an = V2n loglogn 
(注意 在 本 节 中 的 log 均 指 自然 对 数 In). 
引 理 6.6.1 若 {Xa)} 为 独立 的 随机 变量 序列 ， 关 EIXa| < co, 则 级 数  X， 
n=] n= 
几乎 处 处 收敛. 


证 由 三 级 数 收 剑 定理 (定理 6.5.3), 只 要 对 c= 1 验证 {Xn} 的 三 级 数 收敛 即 
可 . 这 可 由 以 下 不 等 式 得 到 : 


.5,. 


oo0 OO 
S P(Xa| 21) 和 >》 ElIXn| < oo， 
了 一】 n=1 
SE [X20x.0<1] < DE [XnlTxt<1}] < > ElXn| < oo， 
n=l1 n=1 


S|ELXa Tx < ll < SElXnl < oo. 
n= 二 1 
引 理 得 证 . 和 
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引 理 6.6.2 若 {Xn} 为 iid 的 随机 变量 序列 , ELX 人 < co, {7%} 为 正 数 序列 . 记 
Zk = KpT x rE/ LER)! Un = Dz, 


则 一 定 存在 满足 下 列 条 件 的 正 数列 {15}: 

(1) mm 4 0; 

(2) m(n/ LLn)/? 1 o0; 

(3) Un/an 一 0, a.s.. 

证 由 了 ELEX3 < co 知 , 在 了 上 存在 非 负 偶 函数 f(x), 当 z > 0 时 f(z) 了 f+oo， 
且 E[X?f(X1)] < co. 这 样 的 函数 是 存在 的 , 例如 设 ee 1 0, 则 由 ELIXa < co 知 对 每 
个 天 存在 mp > ng-1 (no=0), 使 ELXP2TIxl>nl < er/k?, 令 


f(z) = 一， 当 m <zZ 所 时 ,天 一 12…， 
k 


则 容易 验证 f(z) 就 满足 我 们 的 要 求 . 进一步 , 我 们 还 可 以 要 求 f(x) 的 上 升 速 度 不 
要 太 快 . 具体 地 , 我 们 可 以 假定 f(x) 满足 


1/2 
f(n!®) ( 誉 ) 10， f(n) < nf. 





nN 
令 1 n \1/2 
mm) mem (15) ， 
则 由 构造 法 知 5 满足 (1) 和 (2), 下 面 证 明 其 满足 条 件 (3). 首先 ， 
2, [ | 2 2 已 [|XnlKonslxsl<bns] 
n=1 WW n=1 7 m=n 


bm+1P (bm, < [Xn < brmt1) 


从 
[Ms 
中 | 一 
[Ms 


3 
3 
上 
3 


m™m 


1 
bmtiP(bm < |Xi| < bmt1) > 一 
n 


也 一 工 


3 
LL 


因为 Dax! < 性 (2zLLz)-!/2dzx, 所 以 由 分 部 积分 得 
| 2m NY 1T7 m M2 2bm 
> om S ( 芝 ) 2 (5 < Tn 
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再 注意 到 f(n) < ni/3, 故 对 充分 大 的 nn 有 


1/2 
(7) > na/9 > nl/3F (ni/3), 


LLn 
从 而 bs > n13. 不 妨 设 对 任意 n 宇 1 有 b>ni3. 又 因 bmnyl < 2bm, Ym 之 1, 所 以 
5 Ma a < SpaPlon < | < on) 2 
ni Qn m=1 


=4 fm!/s)P(bm < |X1| < brm+1) 
< 4E[XIf(X1)| < oo 


由 引 理 6.6.1 知 ， 叶 Zi/an 几乎 处 处 收敛 . 再 由 Kronecker 引 理 , 即 知 mm 满足 条 
件 (3). | 

以 下 设 独 立 随机 变量 序列 {Xn} 满足 E[Xn] = 0, E[X2] = 02 < co 及 |Xn| 芯 
Mn as., 其 中 M1, 并 记 Bh 二 忆 oz. 


引 理 6.6.3 当 0 < xzM < Bn 时 ， 


2 M,, 
P(Sn, > 2) <e 人 过- 4- 2 )} (6.6.1) 





当 zxM" > Bn 时 ， 





P(S, > x) < exp 仁爱 } . (6.6.2) 
证 中 0 <t<<1/M, 注意 到 对 任意 ?>2 和 1 <k<n,PBXk|? < Mi-202, 故 
对 每 个 1 < 


#7 
Ele'x* i SEX =1+ em 一? 
和 2 7 j=2 2. 


t tM. t2M2 
cir (i+ s+ + 


t2 » t t202 tM 
< 万 5 < — ll ， 
<1+ 5 (1+ SM) op{ 5 十 3 


P(Sn, > 2) <e Eles"]=e 1I Ele:™*] 
k=1 
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< exp 人 十 Br (1 十 2 )) . (6.6.3) 

2 2 
当 zM， < B。 时 , 在 式 (6.6.3) 中 取 t= xz/B。 即 得 式 (6.6.1). 当 xM > Bn 时 , 在 
式 (6.6.3) 中 取 t= 1/M 即 得 式 (6.6.2). n 


引 理 6.6.4 设 B,, M; 等 记号 同上 . 若 z > 0, znM/Bn 一 0, 7x2/Bn 一 oo， 
则 对 任意 jw > 0 及 充分 大 的 n 有 
2 


P(S, > xn) > mp -这 G + 





证 设 t1 二 th =zxn/[(1 一介 Bw], 其 中 5= (4 入 1)/3, 则 由 


zrM, 
二 二 CQ 0 
w= tM -5)B. 一 一 


知 t 一 0. 由 于 当 +>0 时 (es 一 1 一 tz)/zx? 是 z 的 非 降 函 数 及 |Xn| < Mo a.s., 所 
以 有 
Ele'X*] 一 上 十 也 [ec 一 工 一 tXE) Tx lM )| 


et — 1+tM. 
>1+t—— BlXelxs<m.)] 


当 %w 充分 小 时 ， 


又 当 z 之 0 时, 1 十 x 之 exp{X(1 一 Zz)}. 注意 到 当 n 一 00 时 1 一 0 及 一 0, 故 存在 
Ni 当 n> Ni 时 ， 





因此 





EfetS"] > exp { 营 (4 一 4) } . (6.6.4) 
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另 一 方面 , 车 记 qn(x) = P(Sn > z), 则 由 分 部 积分 得 
De Les] 5 
Ble's"]=— /evda(y) =t| eqn(ydy =t> (6.6.5) 
天 一 1 


其 中 万 …… ,五 分 别 表 示 evqn(y) 在 (一 o0,0], (0, (1 一 0)tBnl, -59tBn 1L+o9tBn]， 
((1 十 0)tBn,8tBn] 和 (81B,+oo) 上 的 积分 . 显然 ， 


th < tf etydy = 1. 
在 (84B,,co) 上 , 分 两 种 情况 . 若 y > Ban/Mn, 由 引 理 6.6.3 及 tMn 一 0 有 
qn(y) < exp (起 } < exp{—2ty}. 
车 81B, <y < Bs/Ma, 则 由 引 理 6.6.3 及 tMn 一 0 有 
qn(y) < exp 人 (- 硒 @ 一 se)) < exp {- 丰 |} < exp{—2ty}. 

因此 在 区 间 (84B,,co) 上 恒 有 qn(y) < e ?2y, 故 

tls < tos. ey-2ty dy < 1. 
注意 到 如 B,, 一 co, 由 式 (6.6.4) 可 知 当 n 充分 大 时 Elets"] > 8, 所 以 有 

t( 石 十 石 ) <2< 7 Ele's"]. (6.6.6) 


再 来 估计 五 和 五, 对 任意 yy € DD = (0,(1 一 6)tBn] U (1 + 6)tBn,8tBn],， 有 
0 <y<8tB, 且 yMn/Bn < 8tM 一 0, 因此 利用 引 理 6.6.3, 对 任意 固定 的 86>0 
和 充分 大 的 n, 有 


进而 
(1 + 14) < t | exp{y()}dy, 


其 中 人 = 克 一 访 (1 一 B)/(2Bn). 易 知 %(y) 于 点 yo = tBn/(1 一 B) 处 取 最 大 值 . 
车 8 选取 充分 小 , 点 yo 将 含 于 区 闻 ((1 一 人 )tBn, (1 十 人 )tBn) 中 . 于 是 


sup WY) = max{V((1 — OtBn), $((1 + 6)tBn)}. 
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现 取 6 < 62/(2(1 + 92), 则 








wt{(1 + 6)tBn) = Be (1—62+B(1+6)) < Bn @ 一 5) ， 


2 
t(J2 + I4) < 8t2B,, exp { ( 一 5) } . 
注意 到 万 Bu。 一 co, 当 充分 大 时 ， 


所 以 











32t2B, < exp (和 } (6.6.7) 
于 是 结合 式 (6.6.4) 有 
< le 2B 62 1 
因此 由 式 (6.6.4) ~ (6.6.6) 和 (6.6.8) 得 
2 2 
t73 之 3 Ele's"] 之 3 exp 全 可 @ 一 7)} ， (6.6.9) 
由 qu(.) 的 非 增 性 及 zx = (1 一 56)tBn 得 
tls=t fm eiygn (ydy < 26t2 B,, exp{t? Bn(l + 6)} gn (xn). (6.6.10) 


结合 式 (6.6.9) 和 (6.6.10) 并 注意 到 式 (6.6.7), 由 6 = (4 入 1)/3 知 对 充分 大 的 有 


1 2B, 62 
>— -~ 二 一 全 一 -| 一 
qn (Xn) 之 10428- | 5 | 了 ) 2(1 十 ) } 
1 2B, 02 
之 一 一 一 一 一 
2 2 
>em1-: Bn r+ 


2 2 
> op{ -0 +)) > op{-! Bn } 
引 理 得 证 . 上 


引 理 6.6.5(Levy 不 等 式 ) 设 Xi,… ,XX 为 独立 的 随机 变量 序列 , 记 5Sx 的 中 
位 数 为 w(S5x), 则 














了 ( max (Sk — WwW(Sk — Sn)) > *) <2P(Sn > e), veeR, 


lken 
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P (es, [Sk — mW(Sk — Sn)| > 9 &2P(|Sn| >e), ve>0. 
证 对 任意 6e, 记 A4={k: Sk 一 w(Sk 一 Sn)>el<kgsn), 令 
1 min{k :ke A}, 4 坏人 
nn 十 1， A=0, 
则 7 为 停 时 , 且 


{Sn >e} > {Sn 26TSn} oO) {r=k,Sn— Set+wm(Se — Sn) > 0}. 
k=1 


注意 到 {7 = 有} 为 oc(Xi,… ,Xk) 中 的 事件 , 故 {7 = 有 与 5% 一 Sk 十 外 (Sk 一 Sn) 
独立 . 此 外 , w(Sk 一 56%) = 一 w(Sn 一 Sp), 因而 


P(S, > e) > yprr =k)P(S, 一 8 和 一 到 (Sn — Sx) > 0) 
大 一 


1 1 
之 一 一 二 一 < 
之 P(7T = k) 5P(7 <n) 
k=1 
1 
= P (eg — (Sk — Sn)) > = ， (6.6.11) 


即 第 一 个 不 等 式 成 立 . 当 e > 0 时 , 把 上 面 不 等 式 用 于 一 Xi,… ,一 Xn 可 得 


了 ( max (—Sk + wm(Sk — Sn)) > = 入 2P( 一 9 > 6). 


1l&ken 
此 式 与 式 (6.6.11) 相 加 即 得 本 引 理 的 第 二 个 不 等 式 . 上 
推论 6.6.1 若 Xi,… ,Xn 为 独立 且 对 称 的 随机 变量 , 则 


p (me s > 入 2P(9. 2¢e), veeR, 


lg&ken 
卫 ( max |Sk| 之 9 <2P(|Sn| 宛 ©), Ye>0. 


1&k&n 


推论 6.6.2 若 XX,… ,Xn 为 独立 的 随机 变量 , 满足 E[Xi] = 0, E[X?] = o2， 
1 < i < n, 则 对 任意 ee 及， 


n 1/2 
>e|< >e— 2 . 
P(g) < (52 bg ) 
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证 记 o(Y) = (Var(Y))72. 由 于 了 B[Sx 一 5%] = 0, 由 引 理 6.1.1， 


1/2 
[ww (Sk — Sn)| & o(Sk 一 ss 人 相 ， 1l1&<k<n. 
把 此 结果 代入 Levy 不 等 式 得 


P ( max Sk 之 E11 十 ol)) <P ( max (Sk — WwW(Sk — Sn)) > a) 


1&k&n 1<kn 


< 2P(S, > 6l)， Vel. 


令 c=a 十 o(5%) 即 得 推论 . 


定理 6.6.1(Kolmogorov 重 对 数 律 ) 设 {X,} 为 iid 的 随机 变量 序列 , 满足 
E[X1] = 0, E[X?2] = o2, 则 





= 7 
lim sup 


no00 V2nLin 
证 设 {7} 为 满足 引 理 6.6.2 的 正 实数 序列 , on = (2nLLn)W2, 令 


=0, a&.S.. 


k=1 
了 一 》 区 ， Un 一 Zk 
k=1 天 一 1 
由 引 理 6.6.2 的 证 明 过 程 及 E[X/] = 一 EB[2Z。|] 知 
1 ， 2 1 
元 ED] < 2 元 了 2r| < oo. (6.6.12) 
再 由 Kronecker 引 理 知 
二 IEI 3S/]| 3 IELX/]| — 0. (6.6.13) 


又 E[Y2] = E[X/]? 一 (E[X4])? 一 02, 故 由 Toeplitz 引 理 知 
1 AI 2 
a 2 [Ye] 人 =B ”一 02. (6.6.14) 
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由 式 (6.6.13) 和 引 理 6.6.2， 


[snj| [Un 


lim sup 入 lim sup 一 一 十 jmsup 一 一 0，a.s.， 
爷 一 Co nn n—00 nn 7 一 co Qn 
故 
， Sn 。 了 mn 
limsup— = limsup 一 ，8.8.， 
n+00 Un Nn—00 no 
因此 我 们 仅 需 证 明 


. Tn 
lim sup 一 = 0, a.s. 
了 一 DO 证 


即 可 . 具体 证 明 分 以 下 两 步 . 


J 
(1) lim sup 一 & 0o, a.s.. 
no00 Qn 


设 cE (0,1), 令 zx = (1 十 ejano, Mn = Tn(n/LLn)i/2, 由 式 (6.6.14) 知 





znMn (1+e)o(2nLLn) 2 ( n )” 
Ba 一 Bn ™ Lin 


= (1+eV2om: — 0, 
Bn 


故 对 充分 大 的 n, 有 
zn Mn € B, < o2n 
B, 2 7? ”1-e2 


对 {了 7} 用 引 理 6.6.3 知 , 对 充分 大 的 nm, 有 


1 十 e 202a2 1l+e oanMun, 
P(T, > (1 + 6)oan) < op 人 -人 4 二 各) 








2 
cn 
< exp{—(1+ e)LLn} = (log n)-0+o. 


令 nx = ,9 > 1 待定, 则 


oo CO 
>》 PT 2 (1 +e)oan) Se kD) < oo， (6.6.15) 
k=1 k=1 


其 中 c > 0 为 某 个 有 限 常数 , 因此 由 Borel-Cantelli 引 理 , 对 每 个 e > 0， 


Th 





lim sup < (1l+eo, a.s.. 


天 一 Co Tk 
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令 H(n) = ,Dax 7 由 式 (6.6.14) 知 对 任意 e > 0, 当 n 充分 大 时 ， 


(1+e@oan — VB», > (1+5 3 ) can 
对 (1 十 ejoan 应 用 推论 6.6.2 得 
P(H(ng) > (1 + eoan,) < 2P (Ts, > (1 + 5) gan ) . 
由 式 (6.6.15) 及 Borel-Cantelli 引 理 知 


lim sup HOnx) 


k— 00 Qnx 


<(l+e)o, a.s.. 


取 9=1+e 则 当天 充分 大 时 , 1 < an /an < 1 二 e 由 于 对 任意 n, 存在 k 使 
nk 所 <Nngtl, 故 当 nn 充分 大 时 ， 


H(ng+1) 、 H(n) lng H(n) 1 




















过 之 ~ ? 
Qnrk+i an Qngr Qn l+e 
所 以 
H H 
lim sup Qn) < lim sup Hlnx) (1 十 6) 
n—o0 Qn 大 一 oo Cn 
<(l+e)o < (1+36)0, as.. 
令 。 一 0, 得 
lim sup Wm) oO, A.s 
N00 ny 
从 而 
lim sup 一 一 Wy < lim sup 一 Hn) Soo, a.s 
mn 一 oo Qn mm 一 co Qn 


了 
(2) lim sup 一 > 0, a.s.. 


也 一 OO "TE 


对 每 个 e> 0, 由 引 理 6.6.4, 对 每 个 上 > 0 及 充分 大 的 nn 有 
-2 2 2 
PR > 0 -O00n) > op{ -0 +) 
由 式 (6.6.14), 对 充分 大 的 n 有 B。 > a2m/(1 二 日, 故 
P(T > (1 一 ecan) > exp 人 -9 21n) 
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exp{—(1 — e2)LLn} = (ogn)- (1 ). 


> Pr > > (1 — eoan,) > > (1-0) vo 


由 Borel-Cantelli 引 理 知 





了 了 
lim sup 一 > limsup 一 和 > (1 一 cjc，a.8.. 


7 一 oo Qn no00 Qng 


令 e 一 0 即 得 


Tn 
limsup— 之 0, a.s.. 
mn 一 oo Qn 


把 这 两 步 结合 起 来 即 得 到 本 定理 的 结论 . 


6.7 习 题 


在 以 下 习题 中 , 均 假设 S; = YX. 
k=1 
1. 设 {Xn} 为 iid 的 随机 变量 序列 , 满足 P(X1 = 土 n) = c(n?logn)-!, n= 二 3,4,.…, 其 中 


-1 一 2 河 (m2 logn)-!, 证 明 : 
n=3 


| 


Sn P 。 ISn 
; lim sup 一 一 
n 


一 一 0; = 十 Co. 
no0 


提示 : 证 明 P(Xn| > n,i.o.)= 1 及 P(|Sn| > 7/2,i.0.)=1. 


2. 证 明 : 对 任意 5>0 和 0<p<1, 


lim > 四 玉 (1 一 D 一 0. 


Ik—np|l>n6 
3. 设 {Xn} 为 iid 的 随机 变量 序列 , 满足 P(X1 = 2*) = 2*, 之 1, 证明 {Xn} 不 服从 大 
数 定律 . 
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10. 


11. 
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. 设 {Xa} 为 iid 的 随机 变量 序列 , 满足 P(X1 = 土 1) = 1/2, 证 明 级 数 二 Xn/n 几乎 处 
处 收敛 . 
. 设 {Xa} 为 iid 的 随机 变量 序列 , 满足 P(X = 0) = PCX = 2) = 1/2, 证 明  Xn/3" 
几乎 处 处 收敛 . 
. 设 {X} 为 独立 对 称 的 随机 变量 序列 . 车 Sa/m 一 0, 则 
工 max 及 大 2 0. 
N11SkEn 
提示 : P( max |Xx|> om < P( max |Sk|> sn). 
1&k&n 1&k&n 2 
. 设 {rn} 为 iid 的 Rademacher 随机 变量 序列 , 即 P(r = 士 1) = 1/2, 且 {rn} 与 iid 的 
随机 变量 序列 {Xn} 相互 独立 . 如 果 5 rnXn 几乎 处 处 收敛 , 则 》 X2 也 几乎 处 处 
n=1 n=1 
收 和 敛 . 
. 设 {cj,j 之 1} 为 有 界 实数 列 , {Xn} 为 iid 的 随机 变量 序列 . 若 ELXi] = 0, 证 明 
a Dox 一 0， a.5.. 
提示 : 先 作 截 尾 . 
. 设 {Xa} 为 独立 的 随机 变量 序列 . 车 S。/mn 一 0, 52n /2" 一 ; 0, as, 则 
Sn 一 人 0，a.s.. 
Nn 
设 {Xn} 为 iid 的 随机 变量 序列 , 证 明 {5% /n,n 之 1} 为 一 致 可 积 族 , 且 
Sn Li 
设 U 为 服从 (0,1) 上 均匀 分 布 的 随机 变量 , 定义 Xn = Tfvcin}. 显然 {Xn} 不 是 独 


立 的 随机 变量 序列 , 证 明 


>》 P(Xn|> ©)=+0%0, Ve>0. 
n= 二 1 


但 是 X,, 一 0, as，[ 本 例 说 明 在 不 独立 情况 下 ,并 P(X。| > 6) < oo 不 是 Xi 一 0， 
n=1 
a.s. 的 必要 条 件 ]. 
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12. 设 {Xn} 为 独立 的 随机 变量 序列 , 满足 E[Xi] = 0, E[X?] = 0? < o00,i> 1,02(5,) = 
这 o3, 证 明 
i=1 


2 
P( s > 可 < 0 (Sn) 


1&kEn c2 十 o2(9n) 
13. 设 {Xn} 为 iid 的 随机 变量 序列 , 满足 ELXi] 关 0, 证 明 
| Xe| 


-一 0 .S.. 
1 


提示 : Xn/n 一 0, a.s.. 


ne 


14，(Ottaviani 不 等 式 ) 设 {Xn} 为 独立 的 随机 变量 序列 , 记 Sn = | 9on = Sn, 
j=m+ 
则 对 任意 e > 0， 


P(Sn| > 6) 之 Mis, PSsn| < OP( max, lS;| > 26). 
提示 : 定义 停 时 


Tf intj:je Ah}, Az0 
| +ee， A=0, 


其 中 A4={: |5;|>e,1<j < n), 证 明 


{T= Sn| 所 ec {Sn > e}. 
15. 设 {Xn} 为 独立 的 随机 变量 序列 , 且 E[Xn] = 0, E[X2] = 1, n 之 1. 举例 说 明 中 心 极限 
定理 不 必 成 立 . 
提示 : 取 两 点 分 布 , 不 满足 Lindeberg 条 件 . 


16. 设 {Xh} 为 独立 的 随机 变量 序列 , E[X] = 0, EX2 = 1, n > 1 且 满 足 中 心 极限 定理 ， 
证 明 
limsup 2 =+ 
mn Sup Vi 一 OO0, 8.S.. 
提示 : 用 0-1 律 . 
17. 设 {Xn} 为 iid 随机 变量 序列 , 用 0-1 律 证 明 : 
(1) 车 Xi ~ N(0,07), 则 


了 | lim su 2 =“ = 1; 
站 V2logn 和 
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(2) 车 Xi 服从 参数 和 的 指数 分 布 , 则 
- Xn _ 四 
卫 (limsup iogn = *) 一 1; 
(3) 若 Xi 服从 参数 和 的 Poisson 分 布 , 则 


logl 
P (lim sup oer0e® = 1) = 1 





即 上 极限 与 和 无 关 . 


18. 构造 一 个 独立 非 负 随 机 变量 序列 {X}, 使 二 Xn a.s. 收敛 , 但 > E[X 
至 可 以 构造 {X } 使 P(X > 0,i.0.) =0 但 BIX%] = oo 


19. 设 {Xn} 为 iid 随机 变量 序列 , Xi 服从 Cauchy 分 布 , 其 概率 密度 函数 


plz) = A: ZE 有 R，O>0. 
(1) 证 明 Sw/n > Xi; 
(2) 证 明 S/n 不 能 几乎 处 处 收敛 于 一 常数 ; 
(3) 证 明 
P (sg, Xk 忒 ne) 一 ep{- 才 | 2Z > 0. 


n] 发 散 . 其 


20. 设 {Xn,n 之 0} 为 iid 随机 变量 序列 ，Xo 服从 [0,2n] 上 的 均匀 分 布 , 证 明 级 数 


六 six"zn 以 概率 1 在 |z| < 1 内 收敛 
n 二 0 


21. 设 随机 变量 阵列 {Xnx,1 上 << n,n 之 1} 满足 : 对 每 个 n,n1,… ,Xnn 为 iid 的 , 且 


P(Xni =1)=pa =1- P(X =0). 记 





AX _》 


Sn = 》 Xnk, Pe =P(Sn, = 站， mh = Te 


k=1 
证 明 : 若 npn = 入, 则 
> IB 一 me < 2 min{2, 入 }. 
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